วิดีโอก็เชื่อไม่ได้ งานวิจัยสร้างวิดีโอจากเสียงได้อย่างสมจริง

By lew

on 15 July 2017 - 22:25 Tag: Deep Learning, Computer Vision

Deep Learning

คุณศุภศรณ์ สุวจนกรณ์ จากห้องวิจัย GRAIL นำเสนองานวิจัยในการสร้างวิดีโอของบารัก โอบามา ตามเสียงที่ใส่เข้าไปได้อย่างสมจริง โดยอาศัยข้อมูลเสียงนำมาสร้างเป็นรูปแบบของปากแล้วจึงใส่รายละเอียดลงไปก่อนจะนำภาพปากเคลื่อนไหวนี้ไปใส่วิดีโอเป้าหมาย

งานวิจัยนี้ทำให้สามารถนำเสียงของโอบามาเองมาสร้างภาพวิดีโอใหม่ โดยไม่ต้องอาศัยวิดีโอของการพูดครั้งนั้นจริงๆ แม้แต่เสียงที่สร้างขึ้นมา เช่น เสียงของคนที่เลียนแบบโอบามา หรือเสียงของโอบามาที่ถูกตัดต่อ

การสร้างรูปแบบปากที่เข้ากับเสียง ใช้ recurrent neural network โดยใช้ข้อมูลวิดีโอ 14 ชั่วโมง จากนั้นจึงสร้างภาพปากอย่างละเอียด (รายงานระบุว่าส่วนที่ยากกลับเป็นฟัน) แล้วทำมาปรับเวลากับวิดีโอเพื่อให้การเคลื่อนไหวของหัวสัมพันธ์กับปาก

ตอนนี้คุณศุภศรณ์ทำงานวิจัยอยู่กับ Google Brain ในงานผสม deep learning, computer vision, และ VR

ที่มา - GRAIL

Hiring! บริษัทที่น่าสนใจ

CP AXTRA Public Company Limited - Lotus's

CP AXTRA Lotus's is revolutionizing the retail industry as a Retail Tech company.

Token X

Blockchain, ICO, Tokenization, Digital Assets, and Financial Service

Carmen Software

Hotel Financial Solutions

Next Innovation (Thailand) Co., Ltd.

We are web design with consulting & engineering services driven the future stronger and flexibility.

United Information Highway Co., Ltd.

UIH is Thailand’s leading Digital Infrastructure and Solution Provider for Business

KKP Dime

KKP Dime บริษัทในเครือเกียรตินาคินภัทร

Kiatnakin Phatra Financial Group

Financial Service

Fastwork Technologies

Fastwork.co เว็บไซต์ที่รวบรวม ฟรีแลนซ์ มืออาชีพจากหลากหลายสายงานไว้ในที่เดียวกัน

Thoughtworks Thailand

Thoughtworks เป็นบริษัทที่ปรึกษาด้านเทคโนโยลีระดับโลกที่คว้า Great Place to Work 3 ปีซ้อน

Iron Software

Iron Software is an American company providing a suite of .NET libraries by engineer for engineers.

CLEVERSE

Cleverse is a Venture Builder. Our team builds several tech companies.

Nipa Cloud

#1 OpenStack cloud provider in Thailand with our own data center and software platform.

CDG GROUP

Provider of IT solutions to public, state, and private sectors in Thailand for over 56 years

Bangmod Enterprise

The leader in Cloud Server and Hosting in Thailand.

CIMB THAI Bank

MOVING FORWARD WITH YOU - CIMB is the leading ASEAN Bank

Bangkok Bank

Bangkok Bank is one of Southeast Asia's largest regional banks, a market leader in business banking

Gofive

“We create world-class software experience”

KBTG - KASIKORN Business-Technology Group

KBTG - "The Technology Company for Digital Business Innovation"

Siam Commercial Bank Public Company Limited

"Let's start a brighter career future together"

Icon Framework co.,Ltd.

Global Standard Platform for Real Estate แพลตฟอร์มสำหรับธุรกิจอสังหาริมทรัพย์ครบวงจร มาตรฐานระดับโลก

REFINITIV

The Financial and Risk business of Thomson Reuters is now Refinitiv

H LAB

Re-engineering healthcare systems through intelligent platforms and system design.

LTMH TECH

LTMH TECH มุ่งเน้นการพัฒนาผลิตภัณฑ์ที่สามารถช่วยพันธมิตรของเราให้บรรลุเป้าหมาย

Seven Peaks

We Drive Digital Transformation

Wisesight (Thailand) Co., Ltd.

The Best Choice For Handling Social Media · High Expertise in Social Data · Most Advanced and Secure

MOLOG Tech

We are Modern Logistic Platform, Specialize in WMS, OMS and TMS.

Data Wow Co.,Ltd

We enable our clients to realize increased productivity by solving their most complex issues by Data

LINE Company Thailand

LINE, the world's hottest mobile messaging platform, offers free text and voice messaging + Call

LINE MAN Wongnai

Join our journey to becoming No.1 food platform in Thailand

ถ้านำไปรวมกับ GAN

MrThursday Sat, 07/15/2017 - 22:29

ถ้านำไปรวมกับ GAN ได้ดีๆเมื่อไหร่นี่คือสร้างหนังใหม่ ดาราใหม่ได้เลย

ในคลิปเห็นอ้างอิง Face2face

hisoft Sat, 07/15/2017 - 22:58

ในคลิปเห็นอ้างอิง Face2face ที่เคยลงข่าวเก่าด้วย น่าจะอ้างอิงไว้ด้วยนะครับ

เนี่ยแหละคือโปรเจกต์หนึ่งที่ผ

Be1con Sun, 07/16/2017 - 00:10

เนี่ยแหละคือโปรเจกต์หนึ่งที่ผมเคยคิดจะทำ มันน่ากลัวมากครับถ้าหากทำสำเร็จจริง ๆ

วิดีโอหรือรูปที่โพสลงในเฟสบุ๊

maxmin Sun, 07/16/2017 - 07:53

วิดีโอหรือรูปที่โพสลงในเฟสบุ๊คสามารถใช้เป็นพยานหลักฐานในชั้นศาลได้มั๊ย แล้วเค้าจะรู้ได้ไงว่าสิ่งนั้นเป็นของแท้ไม่มีการแต่งเติม

อันนี้ผมไม่มีความรู้ลึกๆนะครั

ash_to_ash Sun, 07/16/2017 - 08:54

อันนี้ผมไม่มีความรู้ลึกๆนะครับ
ปรกติเวลาภาพที่ถูก Edited มันจะมี
format ใน properties ว่าโดนแก้ไขอะไร
ส่วนวิดีโอก็จะปรกฎในโค้ด ซึ่งบางทีมือสมัครเล่นก็ดูออกบางอันก็ต้องผู้เชี่ยวชาญ
ต้องถามว่าในกรณีนี้โค้ดมีเปลี่ยนแปลงหรือไม่?

ผมเข้าใจว่า

Fourpoint Sun, 07/16/2017 - 11:30

ผมเข้าใจว่า ถ้าไม่ได้เข้ารหัสด้วยkeyเฉพาะยังไงก็แก้ไขข้อมูลที่ซ่อนอยู่โดยตรงได้ครับ

เหมือน exif ก็แก้ไขโดยตรง ยากสุดก็เข้าไปแก้แบบ binary,hex mode จาก file โดยตรงเลย หา header ให้เจอก็จบ

ส่วนในทางศาล ภาพถ่าย คลิปวิดีโอ ต้องนับเป็นพยานแวดล้อมครับ แต่น่ากลัวมากๆ เพราะหลายคดีตัดสินจากพยานแวดล้อมล้วนๆ....

อีกไม่นานก็จะมีการทำ

Hadakung Sun, 07/16/2017 - 10:33

อีกไม่นานก็จะมีการทำ signature วีดีโอกันนะครับถ้ามาถึงยุคที่ภาพตัดต่อกันเนียนมากๆ วิธีนี้ก็การันตีได้ว่าไฟล์วีดีโอเป็น origin ได้

ถ้า "ตอนนี้" ยังพอตรวจได้ครับ

lew Sun, 07/16/2017 - 13:37

ถ้า "ตอนนี้" ยังพอตรวจได้ครับ ใน paper ก็พูดถึงความไม่สมบูรณ์ ที่ยังมีช่วงเวลาแปลกๆ อยู่

แต่ถึงจุดหนึ่งมันก็คงหายไปเรื่อยๆ ถึงตอนนั้นจะทำยังไงกันต่อก็เป็นคำถามที่ต้องถามในระยะยาว

อันนี้แหล่ะ น่ากลัวสุดๆ

Sephanov Sun, 07/16/2017 - 08:45

อันนี้แหล่ะ น่ากลัวสุดๆ เกิดใครเอาวิดีโอผู้นำไปพูดเผยแพร่ในทางที่ไม่ดี เช่นก่อหรือเข้าร่วมสงครามจะน่ากลัวเอามากๆ

ปัจุบัน Fake News

MaxDOL Sun, 07/16/2017 - 13:18

ปัจุบัน Fake News ถือว่าเป็นเรื่องที่น่ากลัวมากๆ

ด้วยเทคโนโลยีแบบนี้ยิ่งอันตราย สามารถชักจูงคนได้ง่ายขึ้นไปอีก

ความน่ากลัวของ AI

aUnderscore_ Sun, 07/16/2017 - 17:00

ความน่ากลัวของ AI อยู่ที่คนเอาใช้เนี่ยแหละครับ เอาไปใช้ในเชิงสร้างสรรค์มันก็เกิดประโยชน์ เอาไปในเชิงทำลาย มันก็สร้างความเสียหายอย่างน่ากลัว

คงเป็นได้แค่ Fake News

yamaha111 Sun, 07/16/2017 - 17:58

คงเป็นได้แค่ Fake News สำหรับยุยงม๊อบให้กระทำอะไรก็ตามตามที่ต้องการ ซึ่งความจริงม๊อบก็พร้อมจะทำอยู่แล้วไม่ว่าจะมี Fake News หรือไม่มีก็ตาม

ส่วนเรื่องสงคราม "เป็นไปไม่ได้เลย" ทหารจะทำภารกิจหรือไม่ มาจากคำสั่งตามลำดับการบัญชาการเท่านั้น แค่คุณบุกเข้าไปในกองทัพบกแล้วเอาปืนจ่อหัวให้ผบ.ทบ.สั่งบุก เท่านี้ก็เพียงพอที่จะเกิดสงครามแล้ว ไม่จำเป็นต้องพึ่งพาเทคโนโลยีอะไรหรอก

กรณีมีใครก็ตามสั่งให้ทำสงครามผ่านคลิปวีดีโอ ในยุค 2017 คงมีแต่ ISIS หรืออัลกออิดะห์เท่านั้นแหละครับ ซึ่งใช้คลิปห่วย ๆ หรือเอาตัวปลอมมาพูด คนทำก็ยินดีทำตามอยู่แล้ว

Apple

public://topics-images/apple_webp.png

SCB10X

public://topics-images/347823389_774095087711602_515970870797767330_n_webp.png

Windows 11

public://topics-images/hero-bloom-logo.jpg

Huawei

public://topics-images/huawei_standard_logo.svg_.png

Google Keep

public://topics-images/google_keep_2020_logo.svg_.png

Instagram

public://topics-images/instagram_logo_2022.svg_.png

SCB

public://topics-images/9crhwyxv_400x400.jpg

Microsoft

public://topics-images/microsoft_logo.svg_.png

Basecamp

public://topics-images/bwpepdi0_400x400.jpg

FTC

public://topics-images/seal_of_the_united_states_federal_trade_commission.svg_.png

public://topics-images/pinterest.png

Palantir

public://topics-images/-nzsuc6w_400x400.png

AIS Business

public://topics-images/logo-business-2021-1.png

PostgreSQL

public://topics-images/images.png

JetBrains

public://topics-images/icx8y2ta_400x400.png

Krungthai

public://topics-images/aam1jxs6_400x400.jpg

Palworld

public://topics-images/mccyhcqf_400x400.jpg

Bill Gates

public://topics-images/bill_gates-september_2024.jpg

VMware

public://topics-images/1nj4i1gp_400x400.jpg

Take-Two Interactive

public://topics-images/0khle7nh_400x400.jpg

OpenAI

public://topics-images/ztsar0jw_400x400.jpg

Thailand

public://topics-images/flag_of_thailand.svg_.png

NVIDIA

public://topics-images/srvczsfq_400x400.jpg

ServiceNow

public://topics-images/ytnrfphe_400x400.png

Klarna

public://topics-images/urcllpjp_400x400.png

Google Play

public://topics-images/play.png

Drupal

public://topics-images/drupal.png

Virtua Fighter

public://topics-images/virtua_figther_2024_logo.png

Paradox Interactive

public://topics-images/paradox_interactive_logo.svg_.png

Europa Universalis

public://topics-images/europa-icon.png

Nintendo Switch 2

public://topics-images/mainvisual.png

Cloudflare

public://topics-images/cloudflare_logo.svg_.png

Samsung

public://topics-images/samsung.png

Google

public://topics-images/google_2015_logo.svg_.png

Uber

public://topics-images/uber.png

Microsoft 365

public://topics-images/m365.png

USA

public://topics-images/flag_of_the_united_states.svg_.png

public://topics-images/0pe0po-z_400x400.jpg

Perplexity

public://topics-images/perplex.jpg

Xperia

public://topics-images/xperia.png

iOS 18

public://topics-images/ios-18-num-96x96_2x.png

True

public://topics-images/true_logo.png

SoftBank

public://topics-images/softbank.jpg

Pac-Man

public://topics-images/pacman.png

Harry Potter

public://topics-images/harry.png

Marvel

public://topics-images/marvel.png

Skydance

public://topics-images/skydance.png

SEA

public://topics-images/sealogo.png

Find My Device

public://topics-images/find.png

Gemini

public://topics-images/google_gemini_logo.svg__1.png

Accessibility

public://topics-images/accessibility-128x128_2x.png

Material Design

public://topics-images/m3-favicon-apple-touch.png

Android 16

public://topics-images/android16.png

Android

public://topics-images/android_0.png

Firefox

public://topics-images/firefox_logo-2019.svg_.png

Google Messages

public://topics-images/messages.png

Notepad

public://topics-images/notepad.png

Singapore

public://topics-images/flag_of_singapore.svg_.png

Airbnb

public://topics-images/airbnb.png

PS5

public://topics-images/ps5.png

Krafton

public://topics-images/krafton.png

Doom

public://topics-images/doom-game-s_logo.svg_.png

AMD

public://topics-images/amd_logo.svg_.png

GTA

public://topics-images/gta_0.png

DoorDash

public://topics-images/doordash.png

YouTube

public://topics-images/yt.png

YouTube Music

public://topics-images/yt-music.png

Facebook

public://topics-images/fb.png

iQiyi

public://topics-images/iqiyi_0.png

Viu

public://topics-images/viu.png

Amazon Prime Video

public://topics-images/prime-vid.png

Spotify

public://topics-images/spotify.jpg

Apple TV

public://topics-images/apple-tv.png

HBO Max

public://topics-images/max.png

Threads

public://topics-images/threads.png

Alexa

public://topics-images/alexa.png

Kindle App

public://topics-images/kindle.png

Shopee

public://topics-images/shopee.png

Waze

public://topics-images/waze.png

Bilibili

public://topics-images/bili.png

Google Maps

public://topics-images/maps.png

Apple Music

public://topics-images/apple-music.png

Claude

public://topics-images/claude.png

TikTok

public://topics-images/tiktok.png

Xbox

public://topics-images/xbox.png

Tesla

public://topics-images/tesla.png

Chrome

public://topics-images/chrome.png

Google Calendar

public://topics-images/gcal.png

Google Home

public://topics-images/ghome.png

Google Meet

public://topics-images/meet.png

NotebookLM

public://topics-images/notebooklm.png

public://topics-images/reddit.png

Assassin’s Creed

public://topics-images/ac.png

Mark Zuckerberg

public://topics-images/zuck.jpg