ทีมวิจัยจาก Google Research นำเสนอเฟรมเวิร์ค Total Relighting สำหรับการทำภาพตัดต่อโดยที่แสงในภาพมีความสมจริงเหมือนกับคนในภาพอยู่ในสถานที่ฉากหลังนั้นจริง

Total Relighting อาศัยโมเดลปัญญาประดิษฐ์หลายชุดประกอบกัน ได้แก่

• Geometry Net: สำหรับการหาความลึกของภาพ
• Albedo Net: สร้างภาพที่เหมือนอยู่ในภาวะแสงฟุ้ง
• Shading Net: ปรับภาพให้มีแสงเงาเหมือนฉากหลัง

โดเมลเหล่านี้เคยมีงานวิจัยก่อนหน้าแล้วทั้งสิ้น แต่ทีมวิจัยก็นำแสดงให้เห็นว่า โมเดลที่ใช้ในชุดงานวิจัยนี้ให้ผลลัพธ์ที่ดีกว่างานก่อนหน้า แต่ยังมีข้อจำกัดสำคัญคือการให้แสงเงาเสื้อผ้านั้นยังไม่ดีนัก เนื่องจากชุดข้อมูลสำหรับฝึกยังมีข้อมูลเครื่องแต่งกายไม่หลากหลายพอ

รายงานนี้จะนำเสนอในงานประชุมวิชาการ SIGGRAPH 2021 เดือนสิงหาคมนี้

ที่มา - Augmented Perception