Azt eddig is tudtuk a mesterséges intelligenciával rendelkező neurális hálózatokról, hogy tökéletesen élethű emberi arcképeket tudnak generálni hatalmas adathalmazokból, de ezt a képességüket most már a hangfelismerő technológiákkal is tudják ötvözni – számoltak be a Massachusettsi Műszaki Egyetem (MIT) számítógép-tudománnyal és mesterséges intelligenciával foglalkozó intézetének (CSAIL) kutatói.

A Speech2Face névre keresztelt neurális hálózat betanításához több millió Youtube-videót használtak fel, hogy a bennük szereplő emberek arcvonásai és hangja közti összefüggések alapján később a videóktól független hangok alapján is tudjon fotorealisztikus arcképet rajzolni a mesterséges intelligencia.

Persze a technológia egyelőre nem képes pontos arcmást generálni hang alapján, de a hangunkat befolyásoló főbb jellemzőkről már van némi fogalma – ide tartozik az életkor, a nem, az etnikum, a száj formája, az arccsontok felépítése vagy az ajkak teltsége. De még olyan beszédjegyek is hatottak az arckép alakulására, mint a beszélt nyelv, az akcentus és a beszéd gyorsasága, amik nemzetiségekre és kultúrákra utalhatnak, így bizonyos fizikai vonásokat is előrevetíthetnek.

Bár a nemet, az életkort és az etnikumot tekintve már közel tökéletes az algoritmus felismerőképessége, a nyelvi akadályokat még nem tudta leküzdeni. A tanulmányban például az szerepel, hogy amikor egy ázsiai férfi kínaiul beszélt, a hálózat egy ázsiai arcot rajzolt le, de amikor ugyanaz az ember angolul beszélt, már egy fehér férfi arcát generálta.

Kapcsolódó cikkek a Qubiten:

Ezek az emberek nem léteznek, mégis fénykép készült róluk

Dippold Ádám TECH 2018. december 20.

A GAN nevű technológia villámgyorsan fejlődik, lassan jöhetnek majd az igazán durva deepfake-botrányok. Öröm az ürömben, hogy hiába tudnak tökéletesen megtévesztő portrékat alkotni a mesterséges intelligenciával, a technika macskás képeket még nem tud hamisítani.

Küszöbön az első deepfake-botrány, a támadók már csak a nagy falatra várnak

Bodnár Zsolt TECH 2018. november 4.

A háttérben már megy a macska-egér játék az orosz dezinformációs trollok és az amerikai kormány elhárítói között, de úgy néz ki, a félidős választásokra még nem csapnak le a deepfakerek. 2020-ban így nagyobbat szakíthatnak.

2018: a deepfake éve, a valóság vége

Bodnár Zsolt TECH 2018. június 6.

A kép-és videóhamisításra használt deepfake technológia odáig jutott, hogy egyes szakértők már információs apokalipszist emlegetnek. A kamu felvételek elterjedése felrúgja azt alapigazságot, miszerint ha másnak nem, legalább a szemünknek hihetünk. Miközben még nincs igazi megoldás a problémára, a mesterséges intelligencia vadul fejlődik tovább.