VLOGGER do Google dá vida aos avatares

VLOGGER é uma plataforma inovadora que permite a criação de avatares controláveis capazes de capturar com precisão semelhanças e movimentos. Para alcançar esse nível de realismo, o modelo por trás do VLOGGER foi treinado em um vasto conjunto de dados multimídia, composto por 800 mil vídeos de pessoas conversando.

Google just unveiled VLOGGER, a tool that generates lifelike talking videos with a single photo

Now, anybody can become a YouTuber.

Here's what you need to know: pic.twitter.com/gpJVBNoAp3
— EyeingAI (@EyeingAI) March 18, 2024

Cada vídeo foi meticulosamente rotulado, identificando cada parte do rosto e do corpo em movimento. Essa abordagem detalhada permitiu ao VLOGGER aprender e reproduzir com precisão uma ampla gama de expressões faciais e gestos corporais.

As aplicações potenciais dessa tecnologia são diversas e empolgantes. Uma delas é a dublagem automática de vídeos em diferentes idiomas, aproveitando a capacidade da ferramenta de criar avatares realistas que podem sincronizar os movimentos labiais com o áudio.

Além disso, o VLOGGER pode ser utilizado na criação de avatares para jogos ou assistentes virtuais, oferecendo uma interação mais imersiva e personalizada para os usuários.

Google VLOGGER: converse com uma foto usando sua voz

A nova ferramenta de IA do Google, chamada VLOGGER, permite transformar fotos em avatares que você controla com a voz. Ela foi treinada com o dataset MENTOR, contendo 800.000 vídeos de pessoas falando.

Outra aplicação interessante é a capacidade de ativar chats de vídeo com baixa largura de banda, onde o VLOGGER pode representar os usuários de forma realista, mesmo em condições de conexão limitada. Essas possibilidades destacam o potencial transformador da ferramenta em várias áreas, desde entretenimento até comunicação.

Leia também:

Apple entra no jogo da IA com o MM1; saiba mais