El impresionante proyecto de Adobe para actualizar la inteligencia artificial está haciendo que los videos aburridos parezcan de alta definición

Los investigadores de Adobe han desarrollado un nuevo modelo de IA llamado VideoGygagan Puede mejorar vídeos borrosos hasta ocho veces su resolución original. Fue introducido en A. Artículo publicado el 18 de abril.Adobe afirma que VideoGigaGAN supera a otros métodos de superresolución de vídeo (VSR) porque puede proporcionar detalles más finos sin introducir ninguna «rareza de la IA» en el metraje.

En resumen, las redes generativas adversarias (GAN) son efectivas para escalar imágenes fijas a una resolución más alta, pero tienen dificultades para hacer lo mismo con videos sin introducir parpadeos y otros artefactos no deseados. Otros métodos de mejora de escala pueden evitar esto, pero los resultados no son tan nítidos ni detallados. VideoGigaGAN tiene como objetivo ofrecer lo mejor de ambos mundos: mayor calidad de imagen/vídeo para los modelos GAN, con menos problemas de parpadeo o distorsión en los fotogramas de salida. La empresa ha proporcionado Varios ejemplos aquí El cual muestra su trabajo en máxima resolución.

Algunos de los detalles más finos de los clips de demostración proporcionados por Adobe parecen bastante artificiales, como la textura de la piel y las arrugas en el ejemplo siguiente, pero los resultados parecen impresionantemente naturales. Sería difícil saber que se utilizó IA generativa para mejorar la resolución, lo que podría ampliar la discusión sobre “qué es una foto” para incluir video.

Esto es solo una vista previa de la investigación, por lo que no hay garantía de que Adobe ponga VideoGigaGAN a disposición de los consumidores a través del software Creative Cloud como Premiere Pro. La compañía presentó previamente una experiencia separada basada en difusión, Project Res-Up, durante su evento MAX en octubre de 2023, que mejora de manera similar la calidad de los GIF y las secuencias de video de baja resolución. Y Adobe no está solo en este trabajo, ya que Microsoft y Nvidia también han desarrollado su propia tecnología VSR.