A Kutatók Az Ideghálózatot Arra Képezték Ki, Hogy Készítsen Egy Rajzfilmet, A „Flintstones” -t. Szöveges Leírással - Alternatív Nézet

A Kutatók Az Ideghálózatot Arra Képezték Ki, Hogy Készítsen Egy Rajzfilmet, A „Flintstones” -t. Szöveges Leírással - Alternatív Nézet
A Kutatók Az Ideghálózatot Arra Képezték Ki, Hogy Készítsen Egy Rajzfilmet, A „Flintstones” -t. Szöveges Leírással - Alternatív Nézet

Videó: A Kutatók Az Ideghálózatot Arra Képezték Ki, Hogy Készítsen Egy Rajzfilmet, A „Flintstones” -t. Szöveges Leírással - Alternatív Nézet

Videó: A Kutatók Az Ideghálózatot Arra Képezték Ki, Hogy Készítsen Egy Rajzfilmet, A „Flintstones” -t. Szöveges Leírással - Alternatív Nézet
Videó: AI, amely Flintstones-t és robotot hozhat létre a bútorok összeállításához | 127. 2024, Szeptember
Anonim

Az algoritmus 25 ezer három másodperces jelenetet töltött be a sorozatból, amelyek mindegyike 75 képkockából állt.

Mint az alkotók beismerték, eddig az algoritmus „nem mindig hoz felismerhetőt”, de gyakran elképesztő pontossággal utánozza az eredeti rajzfilm stílusát.

Az Allen Mesterséges Intelligencia Intézet, az Illinois-i Urbana-Champaign Egyetem és a Washingtoni Egyetem kutatói kifejlesztették a CRAFT (Composition, Retrieval and Fusion Network) nevű neurális hálózatot. Segítségével sikeresen kiképezték a mesterséges intelligenciát a Flintstones (1966-ban leállt) új epizódjainak automatikus animálására szöveges leírások felhasználásával.

A fejlesztő csapat elkészítette a CRAFT-ot, több mint 25 ezer három másodperces klipet töltött fel, amelyek 75 képkockából álltak. Mindegyik részletes leírást tartalmazott arról, hogy kik voltak a helyszínen, és mi történt benne. A CRAFT ezután videó annotációkkal határozta meg, hogy az eredeti klipek hogyan egyeznek a leírásra használt szavakkal.

Végül az algoritmus olyan paramétereket fejlesztett ki, amelyek lehetővé tették számára, hogy "megértse", mit csinálnak a rajzfilm egyes szereplői és tárgyai. Az idegháló megtanulta videoklipeket készíteni szöveges információk alapján, és bizonyos kulcsszavakat "asszociálni" helyzetükhöz, háttérükhöz vagy cselekedeteikhez.

Mint az alkotók beismerték, eddig az algoritmus „nem mindig hoz létre valami felismerhetőt”, de gyakran elképesztő pontossággal utánozza az eredeti rajzfilm stílusát. Van még egy fő probléma - a technológia alacsony alkalmassága a gyakorlati alkalmazáshoz. Míg a fejlesztőknek sokat "manuálisan" kell elvégezniük, és ebben a szakaszban a munkát profi animátorokra bízni egyszerűbb feladatnak tűnik.

GRIGORY PUSHKAREV