Snap ร่วมกับทีมวิจัยจาก Northeastern Unviersity นำเสนอโมเดลปัญญาประดิษฐ์สร้างภาพจากข้อความในชื่อ SnapFusion ชูจุดเด่นว่าเป็นโมเดลที่รันโดยใช้ทรัพยากรน้อยมาก สามารถใช้โทรศัพท์มือถือสร้างภาพในเวลาเพียง 2 วินาทีเท่านั้น
งานวิจัยนี้เป็นการวิเคราะห์โมเดล Stable Diffusion 1.5 โดยพบว่าขั้นตอน denoising นั้นทำงานบนโทรศัพท์มือถือช้ามาก หากรันบนโทรศัพท์ก็จะใช้เวลานานนับนาที ทีมวิจัยเปลี่ยนโครงสร้างของ Stable Diffusion เสียใหม่ เปลี่ยนส่วน distrillation pipeline เป็นโมเดลขนาดเล็กลง 3.8 เท่า และทำงานเร็วขึ้น 3.2 เท่าตัว พร้อมกับลดรอบการทำ denoising ลงจาก 50 รอบเหลือ 8 รอบ
ผลทดสอบโมเดล SnaFusion สามารถทำงานได้คุณภาพระดับเดียวกับ Stable Diffusion 1.5 โดยใช้เวลารัน 1.84 วินาทีบน iPhone 14 Pro ที่พลังประมวลผลต่ำกว่าเซิร์ฟเวอร์มาก
ที่มา - Snap Research

on
optimize แค่ software
nununu Tue, 13/06/2023 - 19:41
optimize แค่ software ยังได้ขนาดนี้ ถ้าใช้ hardware ได้เต็มที่จะขนาดไหน
subsecond บนมือถืออยู่ไม่ไกลแล้วล่ะ
เเปลี่ยนส่วน distrillation
N Pack Tue, 13/06/2023 - 21:12
เปลี่ยน-->แปลี่ยน
ต่อไปฟีเจอร์ Wallpaper
akira Wed, 14/06/2023 - 07:43
ต่อไปฟีเจอร์ Wallpaper บนมือถือคงสร้างจาก AI แทน ให้ random จาก prompt ที่ระบุไว้ทุกวัน
ดีเลยครับ ผมถ่ายเองเอาไปทำ
TeamKiller Wed, 14/06/2023 - 08:40
In reply to ต่อไปฟีเจอร์ Wallpaper by akira
ดีเลยครับ ผมถ่ายเองเอาไปทำ wallpaper แล้วมันไม่เนียนเหมือนรูปที่หาเอาข้างนอกเลย