Στο Χόλιγουντ χάνονται πολλά χρήματα στη μετάφραση.
Ακόμα κι αν οι εταιρείες επενδύουν σε ποιοτικές μεταφράσεις σεναρίων και καλύτερες ερμηνείες από φωνητικούς ηθοποιούς, η μεταγλωττισμένη ψυχαγωγία συχνά εξακολουθεί να φαίνεται τόσο εύθυμη όσο οι παλιές ταινίες κουνγκ φου. Όσο καλός κι αν είναι ο ήχος, αισθάνεται λάθος. Τα χείλη δεν λένε ψέματα.
ΔΙΑΦΗΜΙΣΗ
«Τα χείλη είναι πάντα, πάντα το τελευταίο κομμάτι που κανείς δεν λύνει», λέει ο Jonathan Bronfman, συνιδρυτής και Διευθύνων Σύμβουλος της εταιρείας οπτικών εφέ Monsters Aliens Robots Zombies (MARZ).
Πώς το AI για μεταγλώττιση των χειλιών θα μπορούσε να αλλάξει την κινηματογραφική βιομηχανία https://t.co/Db0XAqF52G
— Fast Company (@FastCompany) Νοέμβριος 19, 2023
LipDub AI
Νωρίτερα φέτος, η εταιρεία του Bronfman παρουσίασε μια τεχνολογία που ονομάζεται LipDub AI, το οποίο χειρίζεται ψηφιακά τις εκφράσεις του προσώπου των ηθοποιών για να ταιριάζει με λέξεις που ειπώνονται σε ξένες γλώσσες. Η τεχνολογία promeεπιτύχετε ένα εξαιρετικό επίπεδο ρεαλισμού και ευχέρειας, μαθαίνοντας πώς να κάνετε τα χείλη των ηθοποιών να ταιριάζουν με τη γλώσσα και τους διερμηνείς.
O LipDub AI συνδυάζει ανάλυση ήχου με δεδομένα βίντεο για την επίτευξη ακριβούς συγχρονισμού χειλιών. Το αποτέλεσμα είναι ένα βίντεο όπου οι κινήσεις των χειλιών ταιριάζουν με τις λέξεις που λέγονται στο κομμάτι ήχου, παρέχοντας μεγαλύτερο ρεαλισμό σε εφαρμογές όπως η μεταγλώττιση ταινιών, η βιντεοδιάσκεψη και τα κινούμενα σχέδια χαρακτήρων.
ΔΙΑΦΗΜΙΣΗ
Η προσαρμογή αυτής της τεχνολογίας σε ένα πολύτιμο προϊόν για τη βιομηχανία ταινιών και διαφήμισης έφερε στους ερευνητές πολύπλοκες προκλήσεις. Τα διάφορα στοιχεία της κινηματογραφικής παραγωγής, όπως οι αλλαγές στον φωτισμό και τις γωνίες της κάμερας, μαζί με σκηνές με πολλούς ηθοποιούς ή πολλαπλά πρόσωπα, απαιτούσαν ιδιαίτερη προσοχή.
Ένα σημαντικό εμπόδιο προέκυψε όταν η τεχνητή νοημοσύνη αρχικά απέτυχε να διαφοροποιήσει μεταξύ ομιλητών και μη ομιλητών. Αυτό είχε ως αποτέλεσμα σκηνές όπου τα χείλη κάθε χαρακτήρα κινούνταν σε συγχρονισμό με μια μόνο προφορική γραμμή.
«Στην αρχή, έπρεπε να βάλουμε μαύρα κουτιά στα πρόσωπα για τα οποία δεν θέλαμε να μιλήσουμε», λέει ο Ματ Πανούσης, συνιδρυτής και διευθύνων σύμβουλος της MARZ. «Είναι ένα πράγμα να το κάνεις αυτό σε ένα απλό μουσικό βίντεο. Ένα άλλο είναι να ανεβάσετε μια ολόκληρη ταινία».
ΔΙΑΦΗΜΙΣΗ
Το μέλλον της τεχνητής νοημοσύνης στο Χόλιγουντ είναι ακόμη καθορισμένο. Η ένωση SAG-AFTRA και τα στούντιο του Χόλιγουντ συζητούν τον ρόλο της τεχνολογίας στις παραγωγές – και η ανάγκη για ρητή συναίνεση από τους ηθοποιούς θα περιπλέξει τις συμφωνίες που απαιτούνται για να πραγματοποιηθεί. Lipdub AI και άλλες τεχνολογίες μπορούν να χρησιμοποιηθούν.
Εάν το LipDub AI και παρόμοιες τεχνολογίες ευδοκιμούν, θα μπορούσε να επεκτείνει την εμβέλεια εγχώριων και ξένων ταινιών, προς όφελος των δημιουργών σε όλο τον κόσμο.
Διαβάστε επίσης:
* Το κείμενο αυτού του άρθρου δημιουργήθηκε εν μέρει από εργαλεία τεχνητής νοημοσύνης, γλωσσικά μοντέλα τελευταίας τεχνολογίας που βοηθούν στην προετοιμασία, την αναθεώρηση, τη μετάφραση και τη σύνοψη κειμένων. Οι καταχωρήσεις κειμένου δημιουργήθηκαν από το Curto Οι ειδήσεις και οι απαντήσεις από εργαλεία τεχνητής νοημοσύνης χρησιμοποιήθηκαν για τη βελτίωση του τελικού περιεχομένου.
Είναι σημαντικό να τονιστεί ότι τα εργαλεία τεχνητής νοημοσύνης είναι απλώς εργαλεία και η τελική ευθύνη για το δημοσιευμένο περιεχόμενο ανήκει στον Curto Νέα. Χρησιμοποιώντας αυτά τα εργαλεία υπεύθυνα και ηθικά, στόχος μας είναι να επεκτείνουμε τις δυνατότητες επικοινωνίας και να εκδημοκρατίσουμε την πρόσβαση σε ποιοτικές πληροφορίες. 🤖
ΔΙΑΦΗΜΙΣΗ
