VideoGigaGAN: Adobe apresenta nova ferramenta de upscaling baseada em IA

Pesquisadores da Adobe desenvolveram um novo modelo de inteligência artificial (IA) generativa chamado VideoGigaGAN, capaz de aumentar a resolução de vídeos borrados em até oito vezes sua resolução original.

Apresentado em um artigo publicado em 18 de abril, a Adobe afirma que o VideoGigaGAN é superior a outros métodos de Super Resolução de Vídeo (VSR), pois pode fornecer mais detalhes refinados sem introduzir qualquer “anormalidade de IA” nas filmagens.

🇬🇧 Subscribe to the best newsletter about AI (in English 🇬🇧) 

🇧🇷 Assine a melhor newsletter sobre IA (em português 🇧🇷)

Em suma, as Redes Generativas Adversárias (GANs) são eficazes para aumentar a resolução de imagens estáticas, mas têm dificuldade em fazer o mesmo para vídeos sem introduzir cintilação e outros artefatos indesejados. Outros métodos de aumento de resolução podem evitar isso, mas os resultados não são tão nítidos ou detalhados. O VideoGigaGAN visa fornecer o melhor dos dois mundos – a maior qualidade de imagem/vídeo dos modelos GAN, com menos cintilação ou problemas de distorção entre os quadros de saída. A empresa forneceu vários exemplos que mostram seu trabalho em resolução completa.

Alguns dos detalhes mais refinados nos clipes de demonstração fornecidos pela Adobe parecem ser inteiramente artificiais, como a textura da pele e as dobras no exemplo abaixo, mas os resultados parecem impressionantemente naturais. Seria difícil dizer que a IA generativa foi usada para melhorar a resolução, o que poderia estender o debate sobre “o que é uma foto” para incluir vídeo.

Esta é apenas uma prévia de pesquisa, então não há garantia de que a Adobe disponibilizará o VideoGigaGAN para consumidores através do software Creative Cloud, como o Premiere Pro. A empresa anteriormente apresentou um experimento de aumento baseado em difusão, o Projeto Res-Up, durante seu evento MAX em outubro de 2023, que melhora de forma semelhante a qualidade de GIFs e filmagens de baixa resolução. E a Adobe não está sozinha nesse trabalho, pois tanto a Microsoft quanto a Nvidia também desenvolveram sua própria tecnologia de aumento de resolução de VSR.

Leia também: