AI สำหรับการพากย์ริมฝีปากสามารถเปลี่ยนอุตสาหกรรมภาพยนตร์ได้ รู้วิธี

เครื่องมือปัญญาประดิษฐ์ (AI) ใหม่สำหรับการพากย์เช่น LipDub AI สามารถขยายการเข้าถึงภาพยนตร์ในประเทศและต่างประเทศได้ รู้เพิ่มเติม!

ในฮอลลีวูด เงินจำนวนมากหายไปจากการแปล

แม้ว่าบริษัทต่างๆ จะลงทุนในการแปลบทที่มีคุณภาพและการแสดงที่ดีขึ้นจากนักพากย์ แต่ความบันเทิงที่มีการพากย์มักจะดูแย่เหมือนกับหนังกังฟูเก่าๆ ต่อให้เสียงดีแค่ไหนก็รู้สึกผิด ริมฝีปากไม่โกหก 

การเผยแพร่

Jonathan Bronfman ผู้ร่วมก่อตั้งและซีอีโอของบริษัทวิชวลเอ็ฟเฟ็กต์ Monsters Aliens Robots Zombies (MARZ) กล่าวว่า “ริมฝีปากนั้นเป็นชิ้นสุดท้ายที่ไม่มีใครแก้ได้เสมอ”

ลิปดับเอไอ

เมื่อต้นปีที่ผ่านมา บริษัทของ Bronfman ได้เปิดตัวเทคโนโลยีที่เรียกว่า ลิปดับเอไอซึ่งจัดการการแสดงออกทางสีหน้าของนักแสดงแบบดิจิทัลเพื่อให้ตรงกับคำที่พูดในภาษาต่างประเทศ เทคโนโลยี promeบรรลุความสมจริงและความคล่องแคล่วในระดับพิเศษด้วยการเรียนรู้วิธีทำให้ริมฝีปากของนักแสดงเข้ากับภาษาและล่าม

O ลิปดับเอไอ ผสมผสานการวิเคราะห์เสียงเข้ากับข้อมูลวิดีโอเพื่อให้ได้ลิปซิงค์ที่แม่นยำ ผลลัพธ์ที่ได้คือวิดีโอที่การเคลื่อนไหวของริมฝีปากตรงกับคำพูดในแทร็กเสียง ให้ความสมจริงมากยิ่งขึ้นในการใช้งาน เช่น การพากย์ภาพยนตร์ การประชุมทางวิดีโอ และแอนิเมชันของตัวละคร

การเผยแพร่

การนำเทคโนโลยีนี้เป็นผลิตภัณฑ์ที่มีคุณค่าสำหรับอุตสาหกรรมภาพยนตร์และโฆษณาทำให้นักวิจัยเผชิญกับความท้าทายที่ซับซ้อน องค์ประกอบต่างๆ ในการผลิตภาพยนตร์ เช่น การเปลี่ยนแปลงของแสงและมุมกล้อง รวมถึงฉากที่มีนักแสดงหลายคนหรือหลายหน้า จำเป็นต้องได้รับการดูแลเป็นพิเศษ

อุปสรรคสำคัญเกิดขึ้นเมื่อในตอนแรก AI ไม่สามารถแยกความแตกต่างระหว่างผู้พูดและผู้ที่ไม่ใช่ผู้พูดได้ ส่งผลให้มีฉากที่ริมฝีปากของตัวละครแต่ละตัวขยับไปพร้อมๆ กันกับคำพูดประโยคเดียว

“ในตอนแรก เราต้องวางกล่องดำบนใบหน้าที่เราไม่อยากพูดถึง” Matt Panousis ผู้ร่วมก่อตั้ง MARZ และประธานเจ้าหน้าที่ฝ่ายปฏิบัติการกล่าว “การทำสิ่งนี้ในมิวสิกวิดีโอเรียบง่ายเป็นเรื่องหนึ่ง อีกประการหนึ่งคือการอัปโหลดภาพยนตร์ทั้งเรื่อง” 

การเผยแพร่

อนาคตของ AI ในฮอลลีวูดยังคงถูกกำหนดไว้ สหภาพ SAG-AFTRA และสตูดิโอฮอลลีวูดกำลังหารือเกี่ยวกับบทบาทของเทคโนโลยีในการผลิต และความจำเป็นในการได้รับความยินยอมอย่างชัดแจ้งจากนักแสดงจะทำให้ข้อตกลงที่จำเป็นในการทำให้มันเกิดขึ้นมีความซับซ้อนขึ้น ลิปดับ เอไอ และเทคโนโลยีอื่นๆได้

ถ้า ลิปดับเอไอ และเทคโนโลยีที่คล้ายคลึงกันก็เจริญเติบโต สามารถขยายขอบเขตการเข้าถึงของภาพยนตร์ในประเทศและต่างประเทศ ซึ่งเป็นประโยชน์ต่อผู้สร้างทั่วโลก

อ่านเพิ่มเติม:

* ข้อความของบทความนี้สร้างขึ้นบางส่วนโดยเครื่องมือปัญญาประดิษฐ์ โมเดลภาษาที่ล้ำสมัยซึ่งช่วยในการจัดเตรียม ทบทวน การแปล และการสรุปข้อความ รายการข้อความถูกสร้างขึ้นโดย Curto มีการใช้ข่าวสารและการตอบกลับจากเครื่องมือ AI เพื่อปรับปรุงเนื้อหาขั้นสุดท้าย
สิ่งสำคัญคือต้องเน้นว่าเครื่องมือ AI เป็นเพียงเครื่องมือ และความรับผิดชอบขั้นสุดท้ายสำหรับเนื้อหาที่เผยแพร่นั้นอยู่ที่ Curto ข่าว. ด้วยการใช้เครื่องมือเหล่านี้อย่างมีความรับผิดชอบและมีจริยธรรม วัตถุประสงค์ของเราคือการขยายความเป็นไปได้ในการสื่อสาร และทำให้การเข้าถึงข้อมูลที่มีคุณภาพเป็นประชาธิปไตย
🤖

การเผยแพร่

เลื่อนขึ้น