VideoGigaGAN: Adobe introduce un nuovo strumento di upscaling basato sull'intelligenza artificiale

ricercatori da Adobe sviluppato un nuovo modello di intelligenza artificiale (IA) generativo chiamato VideoGigaGAN, in grado di aumentare la risoluzione dei video sfocati fino a otto volte la risoluzione originale.

Presentato nell'a articolo pubblicato il 18 aprile Adobe afferma che VideoGigaGAN è superiore ad altri metodi Video Super Risoluzione (VSR) in quanto può fornire dettagli più dettagliati senza introdurre alcuna "anomalia AI" nel filmato.

???????? Iscriviti a il migliore newsletter sull'intelligenza artificiale (in inglese 🇬🇧) 

???????? Firmalo il migliore newsletter sull'intelligenza artificiale (in portoghese 🇧🇷)

In breve, il Reti avversarie generative (GAN) sono efficaci per l'upsampling delle immagini fisse, ma hanno difficoltà a fare lo stesso con i video senza introdurre sfarfallio e altri artefatti indesiderati. Altri metodi di sovracampionamento possono evitarlo, ma i risultati non sono così nitidi o dettagliati. VideoGigaGAN mira a fornire il meglio di entrambi i mondi: la massima qualità di immagine/video dei modelli GAN, con meno problemi di sfarfallio o distorsione tra i fotogrammi di output. L'azienda ha fornito diversi esempi che mostrano il tuo lavoro a piena risoluzione.

Alcuni dei dettagli più fini nelle clip demo fornite da Adobe sembrano essere del tutto artificiali, come la struttura della pelle e le pieghe nell'esempio seguente, ma i risultati sembrano straordinariamente naturali. Sarebbe difficile affermare che l’intelligenza artificiale generativa sia stata utilizzata per migliorare la risoluzione, il che potrebbe estendere il dibattito su “cos’è una foto” per includere i video.

Questa è solo una ricerca in anteprima, quindi non vi è alcuna garanzia che Adobe renderà VideoGigaGAN disponibile ai consumatori tramite software Creative Cloud come Premiere Pro. L'azienda aveva già presentato un esperimento di upscaling basato sulla diffusione, Project Res-Up, durante il suo evento MAX di ottobre 2023, che migliora allo stesso modo la qualità delle GIF e dei filmati a bassa risoluzione. E Adobe non è sola in questo lavoro, come entrambi Microsoft e Nvidia hanno anche sviluppato la propria tecnologia di upscaling VSR.

Leggi anche: