Google vient de dévoiler un outil impressionnant qui permet de créer des vidéos avec l’intelligence artificielle : Lumiere AI. Il s’agit d’un modèle d’IA générative, capable de produire des vidéos à partir de textes ou d’images, mais aussi de modifier des vidéos existantes, en changeant des éléments, des styles ou des parties manquantes. Lumiere AI promet de révolutionner le domaine de la création vidéo en offrant des possibilités inédites et impressionnantes.
Développé par Google Research, l’outil d’IA utilise une architecture appelée Space-Time Diffusion Model. Cette architecture permet la création de vidéos en une seule passe, éliminant ainsi le besoin de générer préalablement des images clés pour ensuite les interpoler. En effet, l’outil de génération de vidéos Lumiere AI s’appuie sur le langage naturel, que ce soit sous forme de texte ou d’image, afin de créer des vidéos correspondantes. Il utilise la reconnaissance visuelle, le traitement d’image et le moteur de recherche de Google dans ce processus.
Lumiere AI est capable de créer des vidéos à partir de rien en utilisant un simple prompt textuel, tel que “un chat qui joue avec une pelote de laine”, ou une image statique comme une peinture ou une photo. Il peut également modifier des vidéos existantes en changeant des éléments tels que les vêtements, les objets ou les personnes, en utilisant un autre prompt textuel comme “une femme en robe rouge”, ou une autre image telle qu’un dessin ou un logo. Lumiere AI peut également compléter des parties manquantes d’une vidéo, que ce soit un arrière-plan, un premier plan ou un objet, en utilisant le contexte et le style de la vidéo.
Quelles sont les fonctionnalités de l’outil Lumiere AI de Google ?
Lumiere AI propose des fonctionnalités innovantes et impressionnantes qui dépassent les capacités des outils existants tels que Photoshop ou Premiere Pro. Ainsi, voici un aperçu des possibilités offertes par ce nouvel outil développé par Google.
1. Texte vers vidéo et image vers vidéo
Lumiere AI propose des fonctionnalités innovantes et impressionnantes qui dépassent les capacités des outils existants tels que Photoshop ou Premiere Pro. Ainsi, voici un aperçu des possibilités offertes par ce nouvel outil développé par Google.
2. Génération stylisée
L’outil peut générer des vidéos dans le style cible d’une image de référence en utilisant des pondérations de modèle texte-image affinées. Cette fonctionnalité comporte divers styles dont « l’autocollant », « l’or fondant en 3D », « le dessin au trait », ou encore « l’embrasé ».
3. Stylisation vidéo
L’outil de génération vidéo Lumiere AI peut transposer le style d’une image ou d’un texte vers une vidéo, en modifiant les couleurs, les textures ou les formes. Par exemple, Lumiere AI peut transposer le style d’une peinture impressionniste, d’un texte poétique, ou d’un logo stylisé, vers une vidéo réaliste, en conservant la cohérence et la fluidité.
4. Cinémagraphes
Lumiere AI a la capacité de convertir une image statique en une vidéo dynamique en animant tout ou une partie de l’image. Par exemple, il peut donner vie au visage d’une personne, au mouvement d’un animal ou au flux d’une rivière en utilisant le style et le contenu de l’image.
5. Inpainting Vidéo
L’inpainting vidéo permet à l’outil Lumiere AI de modifier un élément d’une vidéo, comme un vêtement, un objet, ou une personne, en utilisant un autre élément, comme une image ou un texte. Par exemple, Lumiere AI peut modifier la couleur, la forme, ou le motif d’une robe, en utilisant une image d’un tissu, ou un texte décrivant le changement souhaité.
De plus, l’outil de génération vidéo Lumiere AI peut compléter une partie manquante d’une vidéo, comme un arrière-plan, un premier plan, ou un objet, en utilisant le contexte et le style de la vidéo. Par exemple, Lumiere AI peut compléter un ciel nuageux, un sol enneigé, ou un ballon de football, en utilisant les informations disponibles dans la vidéo, et en générant des détails réalistes.
Il peut aussi y insérer de nouveaux éléments.
Pour l’heure, cet outil si révolutionnaire, mais aussi à craindre en fonction de l’utilisation que vont en faire les créateurs, reste précautionneusement sous scellé, afin d’éviter toutes les formes de dérapage.
Pour accéder à Lumiere AI de Google, cliquez sur ce lien : https://lumiere-video.github.io/
Ces articles pourraient certainement vous intéresser :
- Canva dévoile les grandes tendances design de 2024
- WhatsApp permet enfin de modifier vos messages déjà envoyés
