En attendant la date de sortie de Sora AI, la startup californienne Luma arrive sur le marché de l’IA génératrice de vidéo et lance Dream Machine, un modèle accessible depuis n’importe quel pays.
Bien sûr, on a déjà eu droit à des IA générattrices de vidéos telles que Kling ou Vidu. Mais ces dernières ne sont accessibles que depuis la Chine.
Aujourd’hui, on a une chance d’exploiter notre talent d’artiste grâce à Dream Machine de Luma. Un outil qui est 100 % gratuit.
J’ai testé Dream Machine de Luma et voici les résultats
Comme avec toute IA génératrice de vidéo, on aura besoin d’un prompt pour que le modèle comprenne notre intention.
De mon côté, j’ai exploré le potentiel de Dream Machine de Luma et j’ai essayé de générer de courtes séquences.
Pour mon premier essai, j’ai utilisé ce prompt : « An engineer developing software on his computer » dont voici le résultat :
Et une autre vidéo dont le prompt est : « An intelligent robot in front of a computer screen, editing video for a short film ».
À première vue, les vidéos sont plutôt réalistes, du moins pour la première séquence. Pour le deuxième contenu, j’aurai dû ajouter plus de détails dans mon prompt.
En tout cas, il ne m’a fallu que deux minutes pour obtenir ces courtes séquences vidéos. Pour ce qui est de la rédaction de vos invites, je recommande toujours un outil tel que ChatGPT.
Sinon, vous pouvez toujours consulter les meilleurs marketplaces de prompt, que ce soit pour l’achat ou la vente d’invites.
Le plus grand avantage de Dream Machine, la nouvelle IA génératrice de vidéo de Luma, réside dans sa capacité à représenter de manière fidèle les personnages et les objets.
Par contre, il y a encore quelques améliorations à apporter. Surtout au niveau de la création des mouvements et du texte.
La position de Luma Dream Machine face à la concurrence
Le domaine des IA capables de générer des vidéos à partir de texte est aujourd’hui en pleine effervescence.
Luma AI quant à elle, fait face à une concurrence de plus en plus animée. Au-delà du très médiatisé Sora d’OpenAI, d’autres acteurs émergent pour rivaliser directement avec Dream Machine.
Il s’agit entre autres de Lightricks avec sa plateforme LTX Studio. Celui-ci propose d’ailleurs des fonctionnalités avancées comme l’édition et la personnalisation de vidéo.
On peut également citer Pika Labs Inc et Runway Inc, bien que leurs résultats soient pour l’instant moins aboutis que ceux de Luma ou de Sora AI.
Dans ce contexte compétitif, l’atout majeur de Dream Machine réside dans son accessibilité, vu qu’elle est entièrement gratuite.
Contrairement à Sora qui laisse entendre que les fonctionnalités complètes de Sora seront réservées aux abonnés payants, à l’instar de ChatGPT, Dream Machine est susceptible de tenir la première place des meilleures IA génératives de vidéos.
Tester dès maintenant Dream Machine
Pour vous lancer dans la création de vidéos par IA, rendez-vous simplement sur le site officiel de Luma AI.
Après une rapide inscription pour créer votre compte, vous pourrez immédiatement commencer à expérimenter.
Le principe est similaire aux générateurs d’images comme DALL-E ou Midjourney. Il suffit de rédiger une description textuelle (un prompt) et l’IA génère une vidéo correspondante.
Sinon, Dream Machine propose une option vous permettant de laisser la Dream Machine enrichir automatiquement votre prompt si vous le souhaitez.
En plus du texte, il est également possible de partir d’une image existante que vous pouvez télécharger pour la transformer en séquence animée.
Cette fonctionnalité a notamment inspiré de nombreux internautes qui s’amusent à donner vie à des mèmes célèbres.
L’interface intuitive et les différentes possibilités offertes (texte ou image comme point de départ) rendent l’outil plus accessible, même aux néophytes.
La Dream Machine de Luma AI ouvre ainsi le champ des possibles en matière de création vidéo assistée par intelligence artificielle.
2 minutes par vidéo
Il est important de noter que, bien que l’outil soit gratuit et accessible à tous, sa popularité engendre une forte demande.
La génération d’une vidéo ne prend que deux minutes, certes. Mais vous devrez sans doute faire preuve de patience. Pourquoi ?
Parce que vous devez attendre votre tour dans une file d’attente qui peut s’avérer longue avant que Dream Machine ne traite votre demande.
Face à cet engouement qui a dépassé toutes leurs prévisions, les équipes de Luma ont réagi assez rapidement.
Le 13 juin 2024, elles ont annoncé une montée en puissance significative de Dream Machine, multipliant par dix sa capacité de traitement.
Aujourd’hui même, j’ai essayé un autre prompt et je n’ai pas apparemment eu à attendre dans la file d’attente.
Mais les résultats me semblaient être assez simplistes si on les compare avec les vidéos de démonstration de Sora AI.
Pas encore de détails techniques sur Dream Machine
Bien que les détails techniques complets sur Dream Machine n’aient pas encore été entièrement divulgués, Luma AI continue de démontrer son potentiel en tant qu’acteur majeur de l’IA générative. Dream Machine repose sur une architecture de transformateur capable de générer des vidéos en temps réel à partir de descriptions textuelles, avec une précision étonnante dans la représentation des objets et des scènes.
Le succès de Dream Machine repose sur une équipe d’experts en intelligence artificielle et vision par ordinateur. Alex Yu, directeur technique, est un ancien chercheur en IA à l’Université de Californie à Berkeley, où il s’est spécialisé dans le rendu neuronal en temps réel des scènes 3D. De son côté, Amit Jain, PDG de Luma, a joué un rôle clé dans les expériences multimédias pour le casque Apple Vision Pro. Leur directeur scientifique, Jiaming Song, est connu pour ses recherches novatrices sur les modèles de diffusion, contribuant à faire progresser l’état de l’art dans ce domaine.
Ces profils prestigieux, associés à une approche open-source, laissent entrevoir les solides fondations de Dream Machine, qui s’annonce comme une plateforme incontournable dans l’univers de la génération vidéo par IA.
Limites et contraintes
Actuellement, l’utilisation de Dream Machine est soumise à deux contraintes majeures.
D’une part, les séquences vidéo générées sont limitées à une durée de cinq secondes. D’autre part, dans sa version gratuite, l’outil permet de créer jusqu’à 30 clips par mois.
Pour les utilisateurs souhaitant dépasser ces limites, Luma Labs a mis en place une gamme d’abonnements payants.
Ces formules offrent des capacités de génération accrues, avec des tarifs échelonnés en fonction du volume mensuel souhaité.
Les prix varient cependant de 30 dollars par mois pour un quota de 120 générations à 500 dollars mensuels pour 2 000 clips.
5 prompts à essayer sur Dream Machine
Comme il a été mentionné plus haut, vous pouvez demander à ChatGPT d’OpenAI de vous proposer des prompts pour la génération de vidéos sur Dream Machine de Luma.
Voici cependant 5 invites que vous pourrez utiliser et surtout, n’hésitez pas à nous faire part de vos remarques dans la section commentaires !
« Crée une vidéo d’un magnifique paysage de montagne au lever du soleil, avec des rayons de lumière dorée perçant à travers les nuages et illuminant les sommets enneigés. Inclure une rivière scintillante qui coule doucement au pied des montagnes ».
« Balade en ville futuriste la nuit. Les gratte-ciel sont ornés de néons colorés et des véhicules volants circulent dans le ciel. Les rues sont animées par des piétons et des robots, avec des hologrammes publicitaires illuminant les bâtiments ».
« Imagine une vidéo d’une forêt enchantée au crépuscule. Les arbres sont hauts et majestueux, avec des lumières féeriques flottant autour. Des créatures mystiques, comme des fées et des lutins, se déplacent doucement parmi les arbres, créant une ambiance magique et mystérieuse ».
« Crée une vidéo d’une plage tropicale paradisiaque, avec du sable blanc et de l’eau turquoise. Les palmiers se balancent doucement sous la brise et des vagues calmes viennent s’écraser sur le rivage. Inclure des éléments comme des coquillages, des étoiles de mer et des oiseaux exotiques volant dans le ciel bleu clair ».
« Génère une vidéo d’une course de voitures dans le désert. Des bolides ultra-rapides se lancent à toute vitesse à travers les dunes de sable, laissant des traînées de poussière derrière eux. Le soleil couchant ajoute une teinte orangée à la scène, créant une atmosphère intense et dynamique ».
- Partager l'article :
