Tags:
Node Thumbnail

กูเกิลรายงานถึงโมเดลปัญญาประดิษฐ์เบื้องหลังฟีเจอร์เบลอฉากหลังหรือเปลี่ยนภาพฉากหลังใน Google Meet ที่ใช้ปัญญาประดิษฐ์จับภาพว่าตรงไหนเป็นเบื้องหน้าและตรงไหนเป็นฉากหลัง

โมเดลที่ใช้ตั้งต้นเป็น MobileNetV3-small สร้าง encoder รับภาพ และโมเดลขนาดเท่ากันแต่กลับข้างสร้างเอาท์พุต โดยรวมมีพารามิเตอร์เพียง 193,000 พารามิเตอร์เท่านั้น แต่ละพารามิเตอร์ใช้ข้อมูลแบบ float16 ทำให้ขนาดโมเดลรวมไม่ถึง 400KB

ตัวปัญญาประดิษฐ์มีหน้าที่แยกฉากหลังออกมาเท่านนั้น จากนั้นต้องใช้ฟิลเตอร์เบลอขอบภาพเพื่อให้ใบหน้าคนในวิดีโอกลมกลืนกับฉากหลังที่เป็นภาพวางลงไป หรือหากผู้ใช้เลือกเบลอฉากหลังก็ต้องนำภาพฉากหลังมาเบลอก่อน

โมเดลปัญญาประดิษฐ์ที่ใช้ตัดฉากหลังจริงๆ แล้วมีสองความละเอียด คือ 256x144 และ 160x27 เพื่อให้กระบวนการประมวลผลภาพทั้งหมดยังสามารถประชุมวิดีโอที่เฟรมเรต 30 เฟรมต่อวินาทีได้ กูเกิลแสดงให้เห็นว่าแม้แต่ Chromebook รุ่นราคาถูกเช่น Acer Chromebook 11 ที่ใช้ซีพียู Intel N3060 ก็ยังประมวลผลภาพทั้งหมดได้ภายใน 30ms หรือเฟรมเรต 33fps

ที่มา - Google AI Blog

No Description

Get latest news from Blognone

Comments

By: sian
Windows PhoneAndroidWindows
on 5 November 2020 - 09:17 #1183954
sian's picture

...หรือหากผู้ใช้เลือกเบลอฉากหลังก็ต้องนำภาพฉากหลัง

...หรือหากผู้ใช้เลือกเบลอฉากหลังก็ต้องนำภาพฉากหลังมาเบลอ (?)

By: breambeem
UbuntuWindows
on 5 November 2020 - 10:16 #1183969

อ่านค่าว่าเฟรมเรตเกิน ภาษาไทย แล้วเข้าใจว่า Frame rate ตกเกิน =__=