Qu’est-ce que Lumière, l’IA de Google qui crée des vidéos hyperréalistes à l’aide de texte et de photos ?

Avec Chat GPT surfant sur la crête de la vague, et l’émergence de nouvelles IA spécialisées dans la vidéo, l’image, le montage sonore, entre autres, Google a officiellement présenté « Lumière », une nouvelle intelligence artificielle spécialisée dans la création de vidéos hyperréalistes à l’aide d’instructions textuelles, d’images ou de simples gribouillages.

Plus précisément, l’IA dispose de 6 fonctions principales qui promettent de donner beaucoup de contenu au moment de son lancement : Text to video, image to video, stylized generation, video stylization, cinemagraphs et « inpainting ». Voici une vidéo qui montre le fonctionnement de chacune de ses fonctions :

Comme vous pouvez le voir, chacune des six fonctionnalités a des fonctions totalement différentes, en fonction de ce que nous voulons faire. En voici un bref résumé :

• Text-to-video : Comme son nom l’indique, il permet aux utilisateurs de saisir des instructions textuelles spécifiques telles que « un drapeau argentin flottant sur les plages de Santa Teresita », afin que l’IA puisse les créer.
• Picture-to-Video : Transforme des images statiques en vidéos dynamiques, en animant des éléments dans l’image ou en générant une courte séquence visuelle.
• Génération stylisée : générez des vidéos très brèves (ou de petites séquences) pour donner du dynamisme aux logos ou aux dessins.
• Style vidéo : appliquez des styles visuels à des vidéos existantes. Par exemple, transformez une vidéo ordinaire en quelque chose de similaire à un stop-motion Lego.
• Cinématographes : permet de donner du dynamisme à des portions spécifiques d’une image.
• Inpainting : Il remplit les zones manquantes ou supprimées d’une vidéo de manière réaliste, en reconstruisant visuellement le contenu manquant lors de l’interprétation du contexte.

Si vous souhaitez jeter un coup d’œil au site officiel de Lumière, pour corroborer tous les exemples de contenu présentés, nous vous laissons un lien ici.