Hollywoodban nagyon sok pénzt veszítenek a fordítások.
Még ha a cégek minőségi forgatókönyv-fordításokba és szinkronszínészek jobb teljesítményébe fektetnek is be, a szinkronizált szórakoztatás gyakran még mindig olyan cikinek tűnik, mint a régi kung fu filmek. Nem számít, milyen jó a hangzás, rossz érzés. Az ajkak nem hazudnak.
HIRDETŐ
„Az ajkak mindig, mindig az utolsó darab, amit senki sem old meg” – mondja Jonathan Bronfman, a vizuális effektusokkal foglalkozó Monsters Aliens Robots Zombies (MARZ) társalapítója és vezérigazgatója.
Hogyan változtathatja meg az AI az ajakszinkronizáláshoz a filmipart? https://t.co/Db0XAqF52G
— Fast Company (@FastCompany) November 19, 2023
LipDub AI
Az év elején Bronfman cége bevezette az ún LipDub AI, amely digitálisan manipulálja a színészek arckifejezését, hogy megfeleljen az idegen nyelven elhangzott szavaknak. A technológia promeRendkívüli szintű realizmus és folyékonyság elérése, megtanulva, hogyan lehet a színészek ajkait a nyelvhez és a tolmácsokhoz igazítani.
O LipDub AI a hangelemzést videó adatokkal kombinálja a pontos ajakszinkronizálás érdekében. Az eredmény egy olyan videó, amelyben az ajkak mozgása megegyezik a hangsávban elhangzott szavakkal, így nagyobb valósághűséget biztosít az olyan alkalmazásokban, mint a filmszinkron, a videokonferencia és a karakteranimációk.
HIRDETŐ
Ennek a technológiának a film- és reklámipar számára értékes termékké történő adaptálása összetett kihívások elé állította a kutatókat. Különös odafigyelést igényeltek a filmgyártás különböző elemei, mint például a világítás és a kameraállás megváltoztatása, valamint a több szereplős vagy több arcú jelenetek.
Jelentős akadály adódott, amikor az AI kezdetben nem tudott különbséget tenni a beszélők és a nem beszélők között. Ez olyan jeleneteket eredményezett, ahol az egyes szereplők ajkai szinkronban mozogtak egyetlen beszédsorral.
„Kezdetben fekete dobozokat kellett helyeznünk azokra az arcokra, amelyekről nem akartunk beszélni” – mondja Matt Panousis, a MARZ társalapítója és operatív igazgatója. „Egy dolog ezt megtenni egy egyszerű zenei videóban. Egy másik lehetőség, hogy egy teljes filmet tölts fel.”
HIRDETŐ
A hollywoodi mesterséges intelligencia jövőjét még mindig meghatározzák. A SAG-AFTRA szakszervezet és a hollywoodi stúdiók a technológia szerepéről vitatkoznak a produkciókban – és a színészek kifejezett beleegyezésének szükségessége megnehezíti a megvalósításhoz szükséges megállapodásokat. Lipdub AI és más technológiák is használhatók.
Lenni LipDub AI és a hasonló technológiák virágoznak, kibővítheti a hazai és külföldi filmek elérhetőségét, hasznot hozva az alkotóknak szerte a világon.
Olvassa el:
* A cikk szövegét részben mesterséges intelligencia eszközök, a legkorszerűbb nyelvi modellek generálták, amelyek segítséget nyújtanak a szövegek elkészítésében, áttekintésében, fordításában és összefoglalásában. A szöveges bejegyzéseket a Curto Az AI-eszközök híreit és válaszait felhasználták a végső tartalom javítására.
Fontos kiemelni, hogy az AI eszközök csak eszközök, és a közzétett tartalomért a végső felelősség a Curto Hírek. Ezen eszközök felelősségteljes és etikus használatával célunk a kommunikációs lehetőségek bővítése és a minőségi információkhoz való hozzáférés demokratizálása. 🤖
HIRDETŐ
