AAI · รูปแบบข้อมูลเข้า

การลบพื้นหลัง แยกวัตถุออกจากสภาพแวดล้อมเพื่อให้คุณสามารถวางไว้บน ความโปร่งใส, สลับฉาก, หรือประกอบเข้ากับการออกแบบใหม่. ภายใต้กระโปรงคุณกำลังประเมิน อัลฟ่าแมท—ความทึบต่อพิกเซลจาก 0 ถึง 1—แล้ว การประกอบอัลฟ่า โฟร์กราวด์ทับ สิ่งอื่น. นี่คือคณิตศาสตร์จาก Porter–Duff และสาเหตุของข้อผิดพลาดที่คุ้นเคยเช่น “ขอบ” และ อัลฟ่าตรงกับอัลฟ่าที่คูณไว้ล่วงหน้า. สำหรับคำแนะนำเชิงปฏิบัติเกี่ยวกับการคูณล่วงหน้าและสีเชิงเส้น, ดู บันทึก Win2D ของ Microsoft, Søren Sandmann, และ บทความของ Lomont เกี่ยวกับการผสมเชิงเส้น.

วิธีหลักที่คนใช้ลบพื้นหลัง

1) คีย์โครมา (“หน้าจอเขียว/น้ำเงิน”)

หากคุณสามารถควบคุมการจับภาพได้, ทาสีพื้นหลังเป็นสีทึบ (ส่วนใหญ่มักเป็นสีเขียว) และ คีย์ สีนั้นออกไป. มันรวดเร็ว, ผ่านการทดสอบการต่อสู้ในภาพยนตร์และการออกอากาศ, และเหมาะสำหรับวิดีโอ. ข้อแลกเปลี่ยนคือแสงและตู้เสื้อผ้า: แสงสีจะรั่วไหลไปยังขอบ (โดยเฉพาะเส้นผม), ดังนั้นคุณจะใช้เครื่องมือ despill เพื่อทำให้การปนเปื้อนเป็นกลาง. ไพรเมอร์ที่ดี ได้แก่ เอกสารของ Nuke, Mixing Light, และการสาธิต Fusion แบบลงมือปฏิบัติ.

2) การแบ่งส่วนแบบโต้ตอบ (CV แบบคลาสสิก)

สำหรับภาพเดี่ยวที่มีพื้นหลังรก, อัลกอริทึม แบบโต้ตอบ ต้องการคำใบ้จากผู้ใช้เล็กน้อย—เช่น, สี่เหลี่ยมผืนผ้าหลวมๆ หรือลายเส้นขยุกขยิก—และมาบรรจบกันเป็นหน้ากากที่คมชัด. วิธีการที่เป็นที่ยอมรับคือ GrabCut (บทในหนังสือ), ซึ่งเรียนรู้แบบจำลองสีสำหรับโฟร์กราวด์/พื้นหลัง และใช้การตัดกราฟซ้ำๆ เพื่อแยกพวกมัน. คุณจะเห็นแนวคิดที่คล้ายกันใน การเลือกโฟร์กราวด์ของ GIMP โดยใช้ SIOX (ปลั๊กอิน ImageJ).

3) การทำแมทภาพ (อัลฟ่าแบบละเอียด)

การทำแมท แก้ปัญหาความโปร่งใสแบบเศษส่วนที่ขอบเขตที่บอบบาง (ผม, ขน, ควัน, แก้ว). การทำแมทแบบปิดคลาสสิก ใช้ trimap (แน่นอน-หน้า/แน่นอน-หลัง/ไม่ทราบ) และแก้ปัญหาระบบเชิงเส้นสำหรับอัลฟ่าที่มีความเที่ยงตรงของขอบสูง. การทำแมทภาพแบบลึกสมัยใหม่ ฝึกอบรมโครงข่ายประสาทเทียมบนชุดข้อมูล Adobe Composition-1K (เอกสาร MMEditing), และได้รับการประเมินด้วยเมตริกเช่น SAD, MSE, Gradient, และ Connectivity (คำอธิบายเกณฑ์มาตรฐาน).

4) การตัดภาพด้วยการเรียนรู้เชิงลึก (ไม่มี trimap)

• U²-Net (การตรวจจับวัตถุเด่น) เป็นเครื่องมือ “ลบพื้นหลัง” ทั่วไปที่แข็งแกร่ง (repo).
• MODNet มุ่งเป้าไปที่การทำแมทภาพบุคคลแบบเรียลไทม์ (PDF).
• F, B, Alpha (FBA) Matting ร่วมกันทำนายโฟร์กราวด์, พื้นหลัง, และอัลฟ่าเพื่อลดรัศมีสี (repo).
• Background Matting V2 สมมติว่ามีแผ่นพื้นหลังและให้ผลลัพธ์เป็นแมทระดับเส้นผมแบบเรียลไทม์ที่ความละเอียดสูงสุด 4K/30fps (หน้าโครงการ, repo).

งานแบ่งส่วนที่เกี่ยวข้องก็มีประโยชน์เช่นกัน: DeepLabv3+ ปรับปรุงขอบเขตด้วยตัวเข้ารหัส-ตัวถอดรหัสและคอนโวลูชัน atrous (PDF); Mask R-CNN ให้หน้ากากต่ออินสแตนซ์ (PDF); และ SAM (Segment Anything) เป็น โมเดลพื้นฐาน ที่สามารถแจ้งได้ ที่สร้างหน้ากากแบบ zero-shot บนภาพที่ไม่คุ้นเคย.

เครื่องมือยอดนิยมทำอะไรได้บ้าง

• Photoshop: การดำเนินการด่วน ลบพื้นหลัง ทำงาน “เลือกวัตถุ → หน้ากากเลเยอร์” ภายใต้กระโปรง (ยืนยันที่นี่; บทช่วยสอน).
• GIMP: การเลือกโฟร์กราวด์ (SIOX).
• Canva: 1-คลิก ตัวลบพื้นหลัง สำหรับภาพและวิดีโอสั้น.
• remove.bg: เว็บแอป + API สำหรับระบบอัตโนมัติ.
• อุปกรณ์ Apple: “ยกวัตถุ” ระดับระบบใน Photos/Safari/Quick Look (การตัดภาพบน iOS).

เคล็ดลับเวิร์กโฟลว์สำหรับการตัดภาพที่สะอาดขึ้น

1. ถ่ายภาพอย่างชาญฉลาด. แสงที่ดีและความคมชัดของวัตถุ-พื้นหลังที่แข็งแกร่งช่วยได้ทุกวิธี. ด้วยหน้าจอเขียว/น้ำเงิน, วางแผนสำหรับ despill (คู่มือ).
2. เริ่มกว้าง, ปรับแต่งให้แคบ. เรียกใช้การเลือกอัตโนมัติ (เลือกวัตถุ, U²-Net, SAM), จากนั้นปรับแต่งขอบด้วยพู่กันหรือการทำแมท (เช่น, แบบปิด).
3. ใส่ใจกับความโปร่งแสง. แก้ว, ผ้าคลุมหน้า, การเบลอจากการเคลื่อนไหว, ผมที่ปลิวไสวต้องการอัลฟ่าที่แท้จริง (ไม่ใช่แค่หน้ากากแข็ง). วิธีการที่กู้คืน F/B/α ยังช่วยลดรัศมี.
4. รู้จักอัลฟ่าของคุณ. ตรงกับที่คูณไว้ล่วงหน้า สร้างพฤติกรรมขอบที่แตกต่างกัน; ส่งออก/ประกอบอย่างสม่ำเสมอ (ดู ภาพรวม, Hargreaves).
5. เลือกเอาต์พุตที่เหมาะสม. สำหรับ “ไม่มีพื้นหลัง” ให้ส่งแรสเตอร์ที่มีอัลฟ่าที่สะอาด (เช่น, PNG/WebP) หรือเก็บไฟล์เลเยอร์ที่มีหน้ากากไว้หากคาดว่าจะมีการแก้ไขเพิ่มเติม. กุญแจสำคัญคือ คุณภาพของอัลฟ่า ที่คุณคำนวณ—มีรากฐานมาจาก Porter–Duff.

คุณภาพและการประเมินผล

งานวิชาการรายงานข้อผิดพลาด SAD, MSE, Gradient, และ Connectivity บน Composition-1K. หากคุณกำลังเลือกโมเดล, ให้มองหาเมตริกเหล่านั้น (คำจำกัดความของเมตริก; ส่วนเมตริกของ Background Matting). สำหรับภาพบุคคล/วิดีโอ, MODNet และ Background Matting V2 แข็งแกร่ง; สำหรับภาพ “วัตถุเด่น” ทั่วไป, U²-Net เป็นพื้นฐานที่มั่นคง; สำหรับความโปร่งใสที่ยาก, FBA อาจสะอาดกว่า.

กรณีขอบทั่วไป (และวิธีแก้ไข)

• ผมและขน: ชอบการทำแมท (trimap หรือการทำแมทภาพบุคคลเช่น MODNet) และตรวจสอบบนกระดานหมากรุก.
• โครงสร้างละเอียด (ซี่ล้อจักรยาน, สายเบ็ด): ใช้อินพุตความละเอียดสูงและตัวแบ่งส่วนที่รับรู้ขอบเขตเช่น DeepLabv3+ เป็นขั้นตอนก่อนการทำแมท.
• สิ่งที่มองทะลุได้ (ควัน, แก้ว): คุณต้องใช้อัลฟ่าแบบเศษส่วนและมักจะต้องมีการประมาณสีโฟร์กราวด์ (FBA).
• การประชุมทางวิดีโอ: หากคุณสามารถจับภาพแผ่นที่สะอาดได้, Background Matting V2 ดูเป็นธรรมชาติมากกว่าการสลับ “พื้นหลังเสมือน” แบบง่ายๆ.

สิ่งนี้ปรากฏในโลกแห่งความเป็นจริงที่ไหน

• อีคอมเมิร์ซ: ตลาด (เช่น, Amazon) มักต้องการพื้นหลังภาพหลัก สีขาวบริสุทธิ์; ดู คู่มือภาพผลิตภัณฑ์ (RGB 255,255,255).
• เครื่องมือออกแบบ: ตัวลบพื้นหลัง ของ Canva และ ลบพื้นหลัง ของ Photoshop ทำให้การตัดภาพทำได้ง่ายขึ้น.
• ความสะดวกสบายบนอุปกรณ์: “ยกวัตถุ” ของ iOS/macOS เหมาะสำหรับการแชร์แบบสบายๆ.

ทำไมการตัดภาพบางครั้งดูปลอม (และวิธีแก้ไข)

• การรั่วไหลของสี: แสงสีเขียว/น้ำเงินล้อมรอบวัตถุ—ใช้ การควบคุม despill หรือการเปลี่ยนสีเป้าหมาย.
• รัศมี/ขอบ: โดยปกติแล้วเป็นการตีความอัลฟ่าที่ไม่ตรงกัน (ตรงกับที่คูณไว้ล่วงหน้า) หรือพิกเซลขอบที่ปนเปื้อนจากพื้นหลังเก่า; แปลง/ตีความให้ถูกต้อง (ภาพรวม, รายละเอียด).
• การเบลอ/เกรนที่ไม่ถูกต้อง: วางวัตถุที่คมกริบลงบนพื้นหลังที่นุ่มนวลแล้วมันจะโดดเด่น; จับคู่การเบลอของเลนส์และเกรนหลังการประกอบ (ดู พื้นฐาน Porter–Duff).

คู่มือ TL;DR

1. หากคุณควบคุมการจับภาพ: ใช้คีย์โครมา; ให้แสงสว่างสม่ำเสมอ; วางแผน despill.
2. หากเป็นภาพถ่ายครั้งเดียว: ลองใช้ ลบพื้นหลัง ของ Photoshop, ตัวลบ ของ Canva, หรือ remove.bg; ปรับแต่งด้วยพู่กัน/การทำแมทสำหรับผม.
3. หากคุณต้องการขอบระดับโปร덕ชั่น: ใช้การทำแมท ( แบบปิด หรือแบบลึก) และตรวจสอบอัลฟ่าบนความโปร่งใส; ระวัง การตีความอัลฟ่า.
4. สำหรับภาพบุคคล/วิดีโอ: พิจารณา MODNet หรือ Background Matting V2; สำหรับการแบ่งส่วนที่แนะนำด้วยการคลิก, SAM เป็นส่วนหน้าที่ทรงพลัง.