À peine a-t-on découvert les IA de création d’image que déjà les géants du secteur se mettent à la création de vidéo. Facebook a présenté il y a quelques jours son système “Make-a-Video” qui permet de créer de courts clips à partir de légendes soufflées par des internautes, et c’est maintenant au tour de Google de se lancer dans l’aventure. Le géant de la recherche a publié un article de recherche détaillant les progrès faits par l’entreprise dans le secteur.
Des vidéos de qualité médiocre
L’outil, surnommé Imagen Video, fonctionne de la même manière que Dall-E 2 ou Midjourney. Avec une simple suggestion textuelle, l’intelligence artificielle est capable de créer une courte vidéo traduisant du mieux possible la situation décrite. Le résultat est une vidéo de 24 images par seconde affichant une résolution de 1280 x 768 pixels. Mieux encore, selon l’équipe derrière le développement de Imagen, la machine est capable de “créer des vidéos haute définition avec une haute fidélité d’image, une grande cohérence temporelle et une compréhension profonde du langage.” Sur les exemples mis en ligne par Google, on peut par exemple voir un astronaute faisant du cheval sur Mars, un panda conduisant une voiture ou un ours en peluche faisant la vaisselle.
Tout comme les créations de Dall-E ou les autres IA du genre, les vidéos créées par Imagen sont bourrées de petits défauts qui laissent voir le progrès qui restent encore à parcourir dans le domaine. La première limite est évidemment technique. L’IA ne crée en réalité pas directement une vidéo à 24 images par seconde en HD. D’abord, la machine sort une minuscule vidéo de 24 par 40 pixels à 3 i/s. Cette vidéo est ensuite passée à la moulinette d’un algorithme d’upscaling qui va tenter d’améliorer la qualité et de rajouter des images pour fluidifier l’ensemble. En ressort une vidéo en format HD, mais avec de nombreux artefacts et des déformations étranges qui laissent peu de doutes sur le fait que la vidéo a été créée par une machine.
Une IA nourrie par “des données problématiques”
Créer des images ou des vidéos réalistes de bonne qualité reste un défi pour toutes ces IA, puisque plus un contenu sera détaillé plus il sera aisé d’y voir des défauts. Cela est encore plus visible sur les IA de création de vidéo qui disposent de moins de contenus pour s’entraîner. Sans parler de la puissance de calcul nécessaire pour l’analyse et la création d’une vidéo. Mais ce n’est pas là le seul problème avec Imagen Video. Comme les chercheurs et chercheuses derrière le projet l’expliquent, ces algorithmes “ont été formés avec des données problématiques” qui ont tendance à refléter des “biais sociaux et des stéréotypes”.
En raison de ces problèmes, Google limite pour le moment l’accès à son IA de création de vidéo, soulignant également les risques qu’un tel outil pourrait représenter dans la diffusion “de contenu haineux ou nuisible”. Un débat qui rejoint celui ouvert il y a quelques années à propos des deepfakes et autres vidéos manipulées.
