Adobe presenta un impresionante proyecto de escalado de vídeo asistido por IA

Los investigadores de Adobe han desarrollado un nuevo modelo de inteligencia artificial generativa, VideoGigaGAN, que puede escalar vídeo borroso hasta ocho veces la resolución original.

Esto es lo que sabemos

Adobe afirma que VideoGigaGAN supera a otros métodos de escalado de Superresolución de Vídeo (VSR), ofreciendo resultados más detallados sin artefactos no deseados inducidos por la IA.

Tradicionalmente, las redes generativas adversariales (GAN) son eficaces para escalar imágenes fijas a alta resolución. Sin embargo, tienen dificultades con el vídeo, ya que generan parpadeos y otros defectos. Los métodos alternativos lo evitan, pero no ofrecen la misma calidad.

VideoGigaGAN pretende combinar los mejores aspectos: resultados GAN de alta calidad con problemas mínimos de artefactos en los fotogramas de salida. Adobe ha proporcionado varios ejemplos que demuestran cómo funciona esta tecnología.

Dopis vid @luokai

Hilos de revisión

Algunos detalles del vídeo de demostración, como la textura de la piel y los pliegues, parecen totalmente generados, pero en general los resultados parecen naturales. Es difícil saber si la resolución se ha mejorado con IA generativa, lo que plantea dudas sobre la naturaleza de los contenidos fotográficos y de vídeo.

Por ahora, VideoGigaGAN sigue siendo un proyecto de investigación, y se desconoce si Adobe incorporará la tecnología a sus productos como Premiere Pro. Anteriormente, la compañía anunció otro experimento de mejora de la resolución basado en la difusión, Project Res-Up.

Fuente: The Verge