Imaginez pouvoir transformer des images sans vie en des vidéos réalistes en haute qualité en quelques minutes et sans aucune connaissance technique ! Si ce projet peut vous sembler fantastique, sachez que c’est désormais possible avec une nouvelle IA qui permet non seulement de générer des vidéos à la demande, mais aussi de pouvoir générer des vidéos avec ses memes favoris !
Dream Machine donne vie aux memes avec l’IA
La start up américaine Luma AI, basée à San Francisco, propose un nouveau modèle IA qui permet à ses utilisateurs de générer automatiquement des vidéos à partir de textes et d’images.
Dénommé Dream Machine, ce nouveau projet permet également à ses utilisateurs de donner vie aux memes avec l’IA, générant parfois des vidéos hilarantes, comme celle avec Elon Musk en train de fumer de façon abusive sur le plateau d’une station radio.
Introducing Dream Machine – a next generation video model for creating high quality, realistic shots from text instructions and images using AI. It’s available to everyone today! Try for free here https://t.co/rBVWU50kTc #LumaDreamMachine pic.twitter.com/Ypmacd8E9z
— Luma AI (@LumaLabsAI) June 12, 2024
Disponible en libre accès, Dream Machine permet pour le moment de créer des vidéos de haute qualité de très courte durée (5 secondes), en uploadant une image et/ou en fournissant un texte descriptif très court (le prompt). Une fonctionnalité permet de prolonger la durée de la vidéo de 5 secondes. L’outil génère des vidéos de qualité cinématographique avec des mouvements globalement fluides et réalistes.
Cette nouvelle solution IA qui intervient après l’ère des générateur de texte IA, est proposée par Luma AI, une entreprise avant-gardiste dans le secteur de l’intelligence artificielle. Fondée en 2021, la société propose déjà des solutions innovantes, comme son outil de conversion de photos en fichiers 3D (API Vidéos vers 3D) qui permet aux développeurs d’uploader plusieurs photos et d’obtenir en retour le modèle 3D du produit. Un outil particulièrement utile pour les boutiques e-commerce qui souhaitent par exemple dynamiser leurs flux produits et rendre ainsi la boutique plus séduisante pour les acheteurs finaux.
Dream Machine n’est pas le premier outil dans le domaine de la génération automatique de vidéos à la demande. D’autres solutions occupent déjà le marché, comme GEN-2 Runway ou Google Veo par exemple.
Son lancement devrait néanmoins porter préjudice à la solution Sora (OpenAI), qui rappelons-le n’a pas encore été officiellement lancée sur le marché grand public. Le partage des vidéos hilarantes sur le Web, avec la marque Luma qui apparaît dans chaque vidéo en haut à droite, devrait par ailleurs contribuer à assurer la popularité de cette solution auprès du grand public, au détriment de Sora.
Vos memes préférés en vidéo avec Dream Machine
Seulement cinq jours après la sortie officielle de Dream Machine, les utilisateurs se sont déjà amusés à publier sur les réseaux sociaux des vidéos donnant vie à leurs memes préférés. On peut ainsi apercevoir Elon Musk en train de fumer de façon excessive du cannabis dans une station de radio ou encore une femme hurler après un chat blanc pour ne pas lui avoir offert des fleurs !
Chacune des vidéos ci-dessous ont été générées à partir d’un meme :
Elon Musk fumant du cannabis dans une station radio :
Dream Machine from Luma AI is just 5 days old.
And it's already turning memes into videos.
10 epic examples:
1. Elon Musk smoking pic.twitter.com/H2cx2l3D7o
— Madni Aghadi (@hey_madni) June 17, 2024
Une femme jalouse du regard infidèle de son mari :
Dream Machine by Luma AI is just 3 days old.
Now memes are becoming videos.
10 wild examples:
1. Distracted boyfriendpic.twitter.com/QXNDQdkY4P
— Madni Aghadi (@hey_madni) June 15, 2024
Le pape en veste polaire déambulant dans la rue comme une personne ordinaire :
I had to see in the flesh what the Pope in a down jacket was going to give. #DreamMachine #LumaAI 😂 pic.twitter.com/mXRfyjaw5j
— Pierrick Chevallier | IA (@CharaspowerAI) June 13, 2024
Une femme en colère après un chat blanc :
7. Woman yelling at a catpic.twitter.com/XMcAmR74hv
— Madni Aghadi (@hey_madni) June 17, 2024
Cette petite liste de vidéos ne devrait constituer qu’une petite portion de toutes les vidéos qui seront générées automatiquement et publiées sur les réseaux sociaux dans le courant des prochaines semaines, contribuant ainsi à renforcer la popularité de Dream Machine. Peux-être en retrouver-t-on un, un jour, sur notre liste des meilleurs memecoins !
Dream Machine vs Sora AI
Tableau récapitulatif des performances des deux outils :
Dream Machine | Sora AI |
|
|
Notre avis sur les outils :
Dream Machine propose déjà jusqu’à 30 crédits par mois gratuits à ses utilisateurs. Le système limite cependant à 5 utilisations maximum par jour par utilisateur. On peut s’inscrire en quelques secondes avec un compte Gmail. Une fois connecté à votre compte, vous accédez alors à ce formulaire qui vous permet de spécifier le prompt pour générer la vidéo, ainsi qu’éventuellement une image pour mieux guider l’outil :
La création automatique d’une vidéo ne prend que quelques minutes, et vous pouvez télécharger la vidéo au format MP4 directement sur votre ordinateur personnel. La vidéo intègre une watermark faisant référence à la marque Luma, mais il est possible de la retirer en devenant abonné payant. Plusieurs abonnements payants sont proposés, à partir de 23.99 $ par mois (en prenant l’abonnement annuel), offrant ainsi des fonctionnalités supplémentaires.
Si nous sommes globalement époustouflés par les performances de l’outil, l’outil souffre encore de problèmes majeurs que la prochaine version devra améliorer. On peut par exemple noter le changement de forme d’un objet lors du mouvement de la caméra à 360° autour de l’objet, des mouvements non naturels, l’intégration de textes non réalistes ou encore le manque de réalisme lorsque la caméra se déplace autour des animaux ou des personnes.
On ne peut pas encore tester les performances de l’outil Sora et établir une comparaison fiable avec Dream Machine. L’outil a été mis à la disposition d’un petit groupe, appelé les « red teamers », et dont la fonction première est de tester et d’assurer la sécurité / stabilité de l’outil. Sam Altman, le PDG d’OpenAI, a toutefois déjà présenté les capacités de son outil sur X en dévoilant une vidéo automatique générée à partir d’un prompt composé de quelques mots, et le résultat est assez bluffant :
https://t.co/rmk9zI0oqO pic.twitter.com/WanFKOzdIw
— Sam Altman (@sama) February 15, 2024