À Hollywood, on perd beaucoup d’argent dans la traduction.
Même si les entreprises investissent dans des traductions de scénarios de qualité et dans de meilleures performances des doubleurs, les divertissements doublés semblent souvent aussi ringards que les vieux films de kung-fu. Peu importe la qualité du son, cela ne semble pas correct. Les lèvres ne mentent pas.
PUBLICITÉ
"Les lèvres sont toujours, toujours la dernière pièce que personne ne résout", déclare Jonathan Bronfman, co-fondateur et PDG de la société d'effets visuels Monsters Aliens Robots Zombies (MARZ).
Comment l’IA pour le doublage labial pourrait changer l’industrie cinématographique https://t.co/Db0XAqF52G
– Entreprise rapide (@FastCompany) 19 novembre 2023
LipDub IA
Plus tôt cette année, la société Bronfman a introduit une technologie appelée LipDub IA, qui manipule numériquement les expressions faciales des acteurs pour correspondre aux mots prononcés dans des langues étrangères. La technologie promeatteignez un niveau extraordinaire de réalisme et de fluidité en apprenant à faire correspondre les lèvres des acteurs à la langue et aux interprètes.
O LipDub IA combine l'analyse audio avec les données vidéo pour obtenir une synchronisation labiale précise. Le résultat est une vidéo dans laquelle les mouvements des lèvres correspondent aux mots prononcés sur la piste audio, offrant ainsi un plus grand réalisme dans des applications telles que le doublage de films, la vidéoconférence et l'animation de personnages.
PUBLICITÉ
L'adaptation de cette technologie en un produit précieux pour les industries du cinéma et de la publicité a posé aux chercheurs des défis complexes. Les différents éléments de la production cinématographique, tels que les changements d'éclairage et d'angles de caméra, ainsi que les scènes avec plusieurs acteurs ou plusieurs visages, nécessitaient une attention particulière.
Un obstacle important est apparu lorsque l’IA n’a pas réussi au départ à faire la différence entre les locuteurs et les non-locuteurs. Cela a abouti à des scènes où les lèvres de chaque personnage bougeaient en synchronisation avec une seule ligne parlée.
« Au début, nous devions mettre des boîtes noires sur les visages dont nous ne voulions pas parler », explique Matt Panousis, cofondateur et directeur de l'exploitation de MARZ. « C’est une chose de faire ça dans un simple clip. Une autre consiste à télécharger un film entier.
PUBLICITÉ
L’avenir de l’IA à Hollywood est encore en train d’être déterminé. Le syndicat SAG-AFTRA et les studios hollywoodiens discutent du rôle de la technologie dans les productions – et la nécessité d’obtenir le consentement explicite des acteurs compliquera les accords nécessaires pour y parvenir. Lipdub IA et d'autres technologies peuvent être utilisées.
Si le LipDub IA et que des technologies similaires prospèrent, cela pourrait élargir la portée des films nationaux et étrangers, bénéficiant ainsi aux créateurs du monde entier.
Lire aussi:
* Le texte de cet article a été partiellement généré par des outils d'intelligence artificielle, des modèles linguistiques de pointe qui aident à la préparation, la révision, la traduction et le résumé des textes. Les entrées de texte ont été créées par le Curto Les nouvelles et les réponses des outils d'IA ont été utilisées pour améliorer le contenu final.
Il est important de souligner que les outils d’IA ne sont que des outils et que la responsabilité finale du contenu publié incombe au Curto Nouvelles. En utilisant ces outils de manière responsable et éthique, notre objectif est d’élargir les possibilités de communication et de démocratiser l’accès à une information de qualité. 🤖
PUBLICITÉ
