Adobe a dévoilé un impressionnant projet de mise à l'échelle des vidéos assisté par l'IA

Les chercheurs d'Adobe ont mis au point un nouveau modèle d'intelligence artificielle générative, VideoGigaGAN, capable de reproduire des vidéos floues jusqu'à huit fois la résolution d'origine.

Ce que nous savons

Adobe affirme que VideoGigaGAN est plus performant que les autres méthodes de mise à l'échelle de la super résolution vidéo (VSR) et qu'il permet d'obtenir des résultats plus détaillés sans artefacts indésirables induits par l'intelligence artificielle.

Traditionnellement, les réseaux adversaires génératifs (GAN) sont efficaces pour mettre à l'échelle des images fixes en haute résolution. Cependant, ils ont des difficultés avec les vidéos, créant des scintillements et d'autres défauts. D'autres méthodes permettent d'éviter ce problème, mais n'offrent pas la même qualité.

VideoGigaGAN vise à combiner les meilleurs aspects - des résultats GAN de haute qualité avec un minimum de problèmes d'artefacts dans les images de sortie. Adobe a fourni plusieurs exemples illustrant le fonctionnement de cette technologie.

Dopis vid @luokai

Revisiter les fils

Certains détails de la vidéo de démonstration, tels que la texture de la peau et les plis, semblent être entièrement générés, mais dans l'ensemble, les résultats semblent naturels. Il est difficile de dire si la résolution est améliorée par l'IA générative, ce qui soulève des questions sur la nature du contenu des photos et des vidéos.

Pour l'instant, VideoGigaGAN reste un projet de recherche, et on ne sait pas si Adobe intégrera la technologie dans ses produits tels que Premiere Pro. Plus tôt, la société a annoncé une autre expérience d'amélioration de la résolution basée sur la diffusion, le projet Res-Up.

Source : The Verge The Verge