2024-04-29 15:21:12
Adobe ha desarrollado VideoGigaGAN, un modelo de IA generativa que mejora la resolución de videos borrosos hasta 8 veces, proporcionando detalles refinados sin artefactos indeseados. Esta tecnología promete revolucionar la calidad visual del contenido de video.
Un nuevo modelo de IA generativa llamado VideoGigaGAN ha sido desarrollado por investigadores de Adobe que puede mejorar la resolución de videos borrosos hasta ocho veces su resolución original.
VideoGigaGAN es un modelo de IA generativa desarrollado por los investigadores de Adobe que puede mejorar la resolución de videos borrosos hasta ocho veces su resolución original. A diferencia de otros métodos de Super Resolución de Video (VSR), VideoGigaGAN logra resultados superiores al proporcionar detalles refinados sin introducir artefactos o distorsiones indeseadas conocidas como «extrañezas de IA».
Superando los Desafíos de la Mejora de Video IA
Las Redes Generativas Adversarias (GANs) han demostrado su eficacia en mejorar la resolución de imágenes estáticas, pero enfrentan dificultades al aplicarse a videos debido a la introducción de parpadeos y otros artefactos no deseados. Por otro lado, los métodos de mejora de resolución tradicionales pueden evitar estos problemas, pero los resultados no son tan nítidos o detallados como los de las GANs.
VideoGigaGAN aborda estos desafíos combinando lo mejor de ambos enfoques: la alta calidad de imagen/video de los modelos GAN, con una reducción significativa de parpadeos y distorsiones en los fotogramas de salida.
Los ejemplos proporcionados por Adobe muestran los impresionantes resultados de VideoGigaGAN. Algunos de los detalles más finos, como la textura de la piel y las arrugas, parecen ser totalmente artificiales, pero lucen sorprendentemente naturales. De hecho, sería difícil decir que se usó IA generativa para mejorar la resolución, lo que podría extender el debate sobre «¿qué es una foto?» para incluir video.
La empresa ha proporcionado varios ejemplos aquí que muestran su trabajo en resolución completa.
El Futuro de la Mejora de Video con IA
Aunque VideoGigaGAN es actualmente un proyecto de investigación, existe la posibilidad de que Adobe lo integre en su software Creative Cloud, como Premiere Pro, en un futuro cercano. La empresa ya ha presentado un experimento de mejora de muestreo ascendente basado en difusión, Proyecto Res-Up, que mejora de manera similar la calidad de GIFs y videos de baja resolución.
Además, Adobe no es la única compañía que trabaja en esta tecnología. Tanto Microsoft como Nvidia también han desarrollado su propia tecnología de mejora de resolución de VSR, lo que indica que la mejora de video con IA está ganando impulso en la industria.