Movie Gen: Meta desafia OpenAI e anuncia novo modelo de IA que pode gerar vídeo com som

A Meta, proprietária do Facebook, anunciou na sexta-feira (4) que havia construído um novo modelo de inteligência artificial (IA) chamado Movie Gen que pode criar vídeos e clipes de áudio realistas em resposta a solicitações do usuário, afirmando que pode rivalizar com ferramentas de startups líderes em geração de mídia como OpenAI e ElevenLabs.

Amostras das criações do Movie Gen fornecidas pela Meta mostraram vídeos de animais nadando e surfando, bem como vídeos usando fotos reais de pessoas para retratá-las realizando ações como pintar em uma tela.

O Movie Gen também pode gerar música de fundo e efeitos sonoros sincronizados com o conteúdo dos vídeos, disse a Meta em um post de blog, e usar a ferramenta para editar vídeos existentes.

Em um desses vídeos, a Meta fez a ferramenta inserir pom-poms nas mãos de um homem correndo sozinho no deserto, enquanto em outro ela mudou um estacionamento onde um homem estava andando de skate de um terreno seco para um coberto por uma poça de água.

Vídeos criados pelo Movie Gen podem ter até 16 segundos de duração, enquanto o áudio pode ter até 45 segundos de duração, disse a Meta. Ela compartilhou dados mostrando testes cegos indicando que o modelo se apresenta favoravelmente em comparação com ofertas de startups como Runway, OpenAI, ElevenLabs e Kling.

O anúncio ocorre enquanto Hollywood tem lutado com como aproveitar a tecnologia de vídeo de IA generativa este ano, depois que a OpenAI, apoiada pela Microsoft, em fevereiro, mostrou pela primeira vez como seu produto Sora poderia criar vídeos semelhantes a filmes em resposta a solicitações de texto.

Tecnologistas da indústria do entretenimento estão ansiosos para usar essas ferramentas para melhorar e acelerar a produção cinematográfica, enquanto outros se preocupam em abraçar sistemas que parecem ter sido treinados em obras protegidas por direitos autorais sem permissão.

Legisladores também destacaram preocupações sobre como as falsificações geradas por IA, ou deepfakes, estão sendo usadas em eleições em todo o mundo, incluindo nos EUA, Paquistão, Índia e Indonésia.

Porta-vozes da Meta disseram que a empresa provavelmente não lançará o Movie Gen para uso aberto por desenvolvedores, como fez com sua série de modelos de linguagem de grande porte Llama, dizendo que considera os riscos individualmente para cada modelo. Eles se recusaram a comentar sobre a avaliação da Meta para o Movie Gen especificamente.

Em vez disso, disseram, a Meta estava trabalhando diretamente com a comunidade de entretenimento e outros criadores de conteúdo sobre usos do Movie Gen e o incorporaria em seus próprios produtos algum dia no próximo ano.

De acordo com o post de blog e um artigo de pesquisa sobre a ferramenta lançado pela Meta, a empresa usou uma mistura de conjuntos de dados licenciados e disponíveis publicamente para construir o Movie Gen.

A OpenAI tem se reunido com executivos e agentes de Hollywood este ano para discutir possíveis parcerias envolvendo Sora, embora nenhum acordo tenha sido relatado ter saído dessas conversas ainda. As ansiedades sobre a abordagem da empresa aumentaram em maio quando a atriz Scarlett Johansson acusou o criador do ChatGPT de imitar sua voz sem permissão para seu chatbot.

A Lions Gate Entertainment, a empresa por trás de “Jogos Vorazes” e “Crepúsculo”, anunciou em setembro que estava dando à startup de IA Runway acesso à sua biblioteca de filmes e televisão para treinar um modelo de IA. Em troca, disse, o estúdio e seus cineastas podem usar o modelo para aumentar seu trabalho.

Leia também: