Hollywoodissa menetetään paljon rahaa kääntämiseen.
Vaikka yritykset investoisivatkin laadukkaisiin käsikirjoituskäännöksiin ja ääninäyttelijöiden parempiin esityksiin, dubattu viihde näyttää usein silti yhtä tyhmältä kuin vanhat kung fu -elokuvat. Riippumatta siitä, kuinka hyvä ääni on, se tuntuu väärältä. Huulet eivät valehtele.
MAINONTA
"Huulet ovat aina, aina viimeinen pala, jota kukaan ei ratkaise", sanoo Jonathan Bronfman, visuaalisia tehosteita valmistavan Monsters Aliens Robots Zombiesin (MARZ) perustaja ja toimitusjohtaja.
Kuinka huulikopiointiin tarkoitettu tekoäly voi muuttaa elokuvateollisuutta https://t.co/Db0XAqF52G
- Fast Company (@FastCompany) Marraskuussa 19, 2023
LipDub AI
Aiemmin tänä vuonna Bronfmanin yritys esitteli teknologian nimeltä LipDub AI, joka muokkaa digitaalisesti näyttelijöiden ilmeitä vastaamaan vierailla kielillä puhuttuja sanoja. Teknologia promesaavuttaa poikkeuksellinen realismin ja sujuvuuden taso oppimalla, kuinka näyttelijöiden huulet sopivat kieleen ja tulkkeihin.
O LipDub AI yhdistää äänianalyysin videodataan saavuttaakseen tarkan huulten synkronoinnin. Tuloksena on video, jossa huulten liikkeet vastaavat ääniraidalla puhuttuja sanoja, mikä tarjoaa paremman realistisuuden sovelluksissa, kuten elokuvan jälkiäänitys, videoneuvottelut ja hahmoanimaatiot.
MAINONTA
Tämän tekniikan mukauttaminen arvokkaaksi tuotteeksi elokuva- ja mainosteollisuudelle asetti tutkijoille monimutkaisia haasteita. Elokuvatuotannon eri elementit, kuten valaistuksen ja kamerakulmien muutokset sekä kohtaukset, joissa on useita näyttelijöitä tai useita kasvoja, vaativat erityistä huolellisuutta.
Merkittävä este syntyi, kun tekoäly ei alun perin pystynyt erottamaan puhujia ja ei-puhujia. Tämä johti kohtauksiin, joissa kunkin hahmon huulet liikkuivat synkronoituna yhden puhutun rivin kanssa.
"Aluksi meidän piti laittaa mustat laatikot niiden kasvojen päälle, joista emme halunneet puhua", sanoo Matt Panousis, MARZin perustaja ja operatiivinen johtaja. "Yksi asia on tehdä tämä yksinkertaisessa musiikkivideossa. Toinen vaihtoehto on ladata koko elokuva."
MAINONTA
Tekoälyn tulevaisuus Hollywoodissa on vielä määrittämättä. SAG-AFTRA-liitto ja Hollywood-studiot keskustelevat teknologian roolista tuotannossa – ja näyttelijöiden nimenomaisen suostumuksen tarve vaikeuttaa sen toteuttamiseen tarvittavia sopimuksia. Lipdub AI ja muita tekniikoita voidaan käyttää.
Jos LipDub AI ja vastaavat tekniikat kukoistavat, se voisi laajentaa kotimaisten ja ulkomaisten elokuvien ulottuvuutta, mikä hyödyttää tekijöitä kaikkialla maailmassa.
Lue myös:
* Tämän artikkelin teksti on osittain luotu tekoälytyökaluilla, uusimmilla kielimalleilla, jotka auttavat tekstien valmistelussa, tarkistamisessa, kääntämisessä ja yhteenvedossa. Tekstimerkinnät loi Curto Tekoälytyökalujen uutisia ja vastauksia käytettiin parantamaan lopullista sisältöä.
On tärkeää korostaa, että tekoälytyökalut ovat vain työkaluja, ja lopullinen vastuu julkaistusta sisällöstä on Curto Uutiset. Käyttämällä näitä työkaluja vastuullisesti ja eettisesti tavoitteenamme on laajentaa viestintämahdollisuuksia ja demokratisoida laadukkaan tiedon saatavuutta. 🤖
MAINONTA
