Adobe a récemment présenté son dernier projet d'intelligence artificielle, VideoGigaGAN, un modèle qui vise à améliorer considérablement la qualité des vidéos floues et pixellisées. Cette innovation s'appuie sur des réseaux génératifs adverses avancés pour offrir des résultats supérieurs aux techniques existantes de super résolution vidéo (VSR).
La puissance de l'IA générative
En exploitant la puissance de l'IA générative, VideoGigaGAN est capable de produire des vidéos 1080p ou 4K d'une netteté et d'une précision impressionnantes à partir d'un matériel source pixellisé. Le modèle évite ainsi les artefacts d'upscaling habituels tels que le scintillement ou la distorsion.
Les réseaux neuronaux de VideoGigaGAN ont été spécifiquement formés pour générer des interpolations d'images cohérentes dans le temps à partir d'entrées de moindre qualité. Les exemples fournis par Adobe montrent des textures plus fines et des bords plus nets dans les vidéos mises à l'échelle par l'IA, avec même l'apparition de détails artificiels tels que des rides et des pores qui n'existaient pas dans la source floue d'origine.
Des questions épineuses
La fabrication complète de vidéos en ultra haute définition à partir d'images de surveillance ou de téléphones portables en basse résolution soulève des questions épineuses concernant les "deepfakes" et la prolifération plus large des médias générés par l'IA. Toutefois, Adobe insiste sur le fait que les résultats de VideoGigaGAN semblent bien plus photoréalistes que les précédentes expériences GAN de la société, tout en évitant les résultats étranges qui pouvaient être générés par les précédentes IA.
Vers un déploiement dans les applications Adobe Creative Cloud
Bien qu'il ne s'agisse pour l'instant que d'un projet de recherche, les fonctionnalités d'édition vidéo de VideoGigaGAN, destinées aux vidéastes, devraient être à terme déployées dans les applications phares d'Adobe Creative Cloud, telles que Premiere Pro. La possibilité de transformer instantanément des séquences basse résolution obsolètes en une qualité HD ou même 4K pourrait changer la donne pour les monteurs vidéo et les créateurs de contenu.
Enfin, VideoGigaGAN représente une avancée significative dans le domaine de la super résolution vidéo, offrant des résultats impressionnants et ouvrant de nouvelles perspectives pour les professionnels de la vidéo. Toutefois, cette innovation soulève également des questions importantes sur l'utilisation et les conséquences des médias générés par l'IA.
