En attendant la date de sortie de Sora AI, la startup californienne Luma arrive sur le marché de l'IA génératrice de vidéo et lance Dream Machine, un modèle accessible depuis n'importe quel pays.
Bien sûr, on a déjà eu droit à des IA générattrices de vidéos telles que Kling ou Vidu. Mais ces dernières ne sont accessibles que depuis la Chine.
Aujourd'hui, on a une chance d'exploiter notre talent d'artiste grâce à Dream Machine de Luma. Un outil qui est 100 % gratuit.
J'ai testé Dream Machine de Luma et voici les résultats
Comme avec toute IA génératrice de vidéo, on aura besoin d'un prompt pour que le modèle comprenne notre intention.
De mon côté, j'ai exploré le potentiel de Dream Machine de Luma et j'ai essayé de générer de courtes séquences.
Pour mon premier essai, j'ai utilisé ce prompt : « An engineer developing software on his computer » dont voici le résultat :
Et une autre vidéo dont le prompt est : « An intelligent robot in front of a computer screen, editing video for a short film ».
À première vue, les vidéos sont plutôt réalistes, du moins pour la première séquence. Pour le deuxième contenu, j'aurai dû ajouter plus de détails dans mon prompt.
En tout cas, il ne m'a fallu que deux minutes pour obtenir ces courtes séquences vidéos. Pour ce qui est de la rédaction de vos invites, je recommande toujours un outil tel que ChatGPT.
Sinon, vous pouvez toujours consulter les meilleurs marketplaces de prompt, que ce soit pour l'achat ou la vente d'invites.
Le plus grand avantage de Dream Machine, la nouvelle IA génératrice de vidéo de Luma, réside dans sa capacité à représenter de manière fidèle les personnages et les objets.
Par contre, il y a encore quelques améliorations à apporter. Surtout au niveau de la création des mouvements et du texte.
La position de Luma Dream Machine face à la concurrence
Le domaine des IA capables de générer des vidéos à partir de texte est aujourd'hui en pleine effervescence.
Luma AI quant à elle, fait face à une concurrence de plus en plus animée. Au-delà du très médiatisé Sora d'OpenAI, d'autres acteurs émergent pour rivaliser directement avec Dream Machine.
Il s'agit entre autres de Lightricks avec sa plateforme LTX Studio. Celui-ci propose d'ailleurs des fonctionnalités avancées comme l'édition et la personnalisation de vidéo.
On peut également citer Pika Labs Inc et Runway Inc, bien que leurs résultats soient pour l'instant moins aboutis que ceux de Luma ou de Sora AI.
Dans ce contexte compétitif, l'atout majeur de Dream Machine réside dans son accessibilité, vu qu'elle est entièrement gratuite.
Contrairement à Sora qui laisse entendre que les fonctionnalités complètes de Sora seront réservées aux abonnés payants, à l'instar de ChatGPT, Dream Machine est susceptible de tenir la première place des meilleures IA génératives de vidéos.
Tester dès maintenant Dream Machine
Pour vous lancer dans la création de vidéos par IA, rendez-vous simplement sur le site officiel de Luma AI.
Après une rapide inscription pour créer votre compte, vous pourrez immédiatement commencer à expérimenter.
Le principe est similaire aux générateurs d'images comme DALL-E ou Midjourney. Il suffit de rédiger une description textuelle (un prompt) et l'IA génère une vidéo correspondante.
Sinon, Dream Machine propose une option vous permettant de laisser la Dream Machine enrichir automatiquement votre prompt si vous le souhaitez.
En plus du texte, il est également possible de partir d'une image existante que vous pouvez télécharger pour la transformer en séquence animée.
Cette fonctionnalité a notamment inspiré de nombreux internautes qui s'amusent à donner vie à des mèmes célèbres.
L'interface intuitive et les différentes possibilités offertes (texte ou image comme point de départ) rendent l'outil plus accessible, même aux néophytes.
La Dream Machine de Luma AI ouvre ainsi le champ des possibles en matière de création vidéo assistée par intelligence artificielle.
2 minutes par vidéo
Il est important de noter que, bien que l'outil soit gratuit et accessible à tous, sa popularité engendre une forte demande.
La génération d'une vidéo ne prend que deux minutes, certes. Mais vous devrez sans doute faire preuve de patience. Pourquoi ?
Parce que vous devez attendre votre tour dans une file d'attente qui peut s'avérer longue avant que Dream Machine ne traite votre demande.
Face à cet engouement qui a dépassé toutes leurs prévisions, les équipes de Luma ont réagi assez rapidement.
Le 13 juin 2024, elles ont annoncé une montée en puissance significative de Dream Machine, multipliant par dix sa capacité de traitement.
Aujourd'hui même, j'ai essayé un autre prompt et je n'ai pas apparemment eu à attendre dans la file d'attente.
Mais les résultats me semblaient être assez simplistes si on les compare avec les vidéos de démonstration de Sora AI.
Pas encore de détails techniques sur Dream Machine
Pour le moment, Luma n'a pas encore divulgué les détails techniques de son modèle d'IA Dream Machine.
Mais malgré sa jeunesse, elle peut compter sur une équipe d'experts en intelligence artificielle, spécialisée en vision par ordinateur.
Le parcours des cofondateurs est révélateur de cette expertise. Alex Yu, directeur technique, est un ancien chercheur en IA de l'Université de Californie à Berkeley.
Ses travaux pionniers portent sur le rendu neuronal en temps réel de scènes 3D et la génération d'images à partir d'un seul exemple.
Quant à Amit Jain, PDG de Luma, il a contribué aux expériences multimédias du casque Apple Vision Pro.
L'équipe s'appuie également sur Jiaming Song, leur directeur scientifique. Reconnu pour ses recherches sur les modèles de diffusion, il a contribué à repousser les limites de l'état de l'art dans ce domaine.
Ces profils de haut vol, bien qu'issus d'une jeune entreprise, laissent entrevoir les fondations solides sur lesquelles repose Dream Machine, même si les rouages précis de l'outil restent jusqu'à l'heure confidentiels.
Limites et contraintes
Actuellement, l'utilisation de Dream Machine est soumise à deux contraintes majeures.
D'une part, les séquences vidéo générées sont limitées à une durée de cinq secondes. D'autre part, dans sa version gratuite, l'outil permet de créer jusqu'à 30 clips par mois.
Pour les utilisateurs souhaitant dépasser ces limites, Luma Labs a mis en place une gamme d'abonnements payants.
Ces formules offrent des capacités de génération accrues, avec des tarifs échelonnés en fonction du volume mensuel souhaité.
Les prix varient cependant de 30 dollars par mois pour un quota de 120 générations à 500 dollars mensuels pour 2 000 clips.
5 prompts à essayer sur Dream Machine
Comme il a été mentionné plus haut, vous pouvez demander à ChatGPT d'OpenAI de vous proposer des prompts pour la génération de vidéos sur Dream Machine de Luma.
Voici cependant 5 invites que vous pourrez utiliser et surtout, n'hésitez pas à nous faire part de vos remarques dans la section commentaires !
« Crée une vidéo d'un magnifique paysage de montagne au lever du soleil, avec des rayons de lumière dorée perçant à travers les nuages et illuminant les sommets enneigés. Inclure une rivière scintillante qui coule doucement au pied des montagnes ».
« Balade en ville futuriste la nuit. Les gratte-ciel sont ornés de néons colorés et des véhicules volants circulent dans le ciel. Les rues sont animées par des piétons et des robots, avec des hologrammes publicitaires illuminant les bâtiments ».
« Imagine une vidéo d'une forêt enchantée au crépuscule. Les arbres sont hauts et majestueux, avec des lumières féeriques flottant autour. Des créatures mystiques, comme des fées et des lutins, se déplacent doucement parmi les arbres, créant une ambiance magique et mystérieuse ».
« Crée une vidéo d'une plage tropicale paradisiaque, avec du sable blanc et de l'eau turquoise. Les palmiers se balancent doucement sous la brise et des vagues calmes viennent s'écraser sur le rivage. Inclure des éléments comme des coquillages, des étoiles de mer et des oiseaux exotiques volant dans le ciel bleu clair ».
« Génère une vidéo d'une course de voitures dans le désert. Des bolides ultra-rapides se lancent à toute vitesse à travers les dunes de sable, laissant des traînées de poussière derrière eux. Le soleil couchant ajoute une teinte orangée à la scène, créant une atmosphère intense et dynamique ».
- Partager l'article :
