Que peut faire Runway AI Gen-2 pour vous ? Laisse-moi expliquer; imaginez que vous avez besoin d’une vidéo qui contient un randonneur à travers un pinceau de la jungle. Quelles sont les options qui vous viennent à l’esprit en premier ?
UN) Faire une promenade dans les bois et tourner cette vidéo.
B) Trouvez et achetez une vidéo similaire.
C) Utiliser des outils d’IA génératifs pour combiner d’autres images pour une vidéo similaire.
Bien que cela demande du temps et des connaissances techniques, toutes les solutions ci-dessus peuvent satisfaire votre demande. Cependant, et si on vous disait qu’une « option D » qui vous épargnera tout ce dur labeur s’ajouterait très prochainement à la liste ? Avec Runway AI Gen-2, si vous pouvez le dire, vous pouvez voir que l’ère commence. Ce nouveau modèle vous permettra de créer des vidéos avec des mots uniquement.
Qu’est-ce que Runway AI Gen-2 ?
La deuxième génération du logiciel AI de Runway, simplement intitulée Runway AI Gen-2, est une amélioration majeure par rapport à la première génération. Runway AI Gen-2 peut créer des vidéos complètes uniquement à partir de descriptions textuelles, tandis que l’ancienne version ne pouvait générer de nouvelles vidéos qu’en utilisant les données de celles existantes. Depuis septembre dernier, la firme travaille sur ce modèle innovant, et ils sont maintenant heureux de révéler qu’il s’agit du premier modèle d’IA texte-vidéo accessible au grand public.
Générez des vidéos avec rien d’autre que des mots. Si vous pouvez le dire, maintenant vous pouvez le voir.
Présentation de Text to Video. Avec Gen-2.
En savoir plus sur https://t.co/PsJh664G0Q pic.twitter.com/6qEgcZ9QV4
— Piste (@runwayml) 20 mars 2023
La société affirme que sa nouvelle approche permet aux utilisateurs de synthétiser de manière réaliste et cohérente de nouvelles vidéos en utilisant la composition et le style d’une image ou d’une invite de texte à appliquer à la structure d’une vidéo source (une fonctionnalité présente dans Gen-1) ou en utilisant uniquement des invites textuelles.
Gen-1 s’est concentré sur la modification de la vidéo préexistante, permettant aux utilisateurs d’alimenter un clip de smartphone tremblant ou une animation 3D brute, puis d’appliquer une superposition générée par l’IA. Runway AI Gen-2 est une grande amélioration par rapport à Gen-1 car il combine les meilleures qualités des deux générations, ce qui lui permet d’appliquer la composition et le style d’une image ou d’une invite de texte à la structure d’une vidéo source pour générer une toute nouvelle vidéo. .
Ce qu’il a accompli est vraiment remarquable : il peut désormais générer du tout nouveau matériel vidéo à partir de descriptions textuelles uniquement. La plate-forme Web peut générer des vidéos avec un niveau de résolution décent qui, bien qu’elles ne soient pas photoréalistes, montrent le potentiel de la technologie. Les vidéos réalisées par Gen-2 Runway AI sont très remarquables par rapport à ce qui existe déjà sur le marché.
« Les réseaux de neurones profonds pour la synthèse d’images et de vidéos deviennent de plus en plus précis, réalistes et contrôlables. En quelques années, nous sommes passés d’images floues à basse résolution à des images à la fois très réalistes et esthétiques permettant l’essor des médias synthétiques.
-IA de piste
Vérifiercomment utiliser GPT-4et découvrez les nouvelles fonctionnalités de ChatGPT
Fonctionnalités Runway AI Gen-2
En ce qui concerne les nouvelles fonctionnalités, Gen-2 dispose de trois modes supplémentaires :
- Mode 1 (texte vers vidéo) : Créez des vidéos de toutes les manières auxquelles vous pouvez penser à partir de zéro en utilisant uniquement une invite de texte.
- Mode 2 (Texte + Image vers Vidéo) : Générez une vidéo basée sur une image de conduite et une invite de texte.
- Mode 3 – Image vers vidéo : Générez une vidéo en utilisant uniquement une image de conduite.
De plus, les modes introduits dans Runway AI Gen-1 sont reportés sur Runway AI Gen-2, tels que :
- Mode 4 (stylisation) : Utilisez l’esthétique de n’importe quelle image ou invite pour indiquer comment votre vidéo est rendue dans chaque image.
- Mode 5 (Scénarimage): Créez des rendus finis, stylés et mobiles à partir de maquettes.
- Mode 6 (Masque): Isoler les sujets.
- Mode 7 (Rendu): Réalisez des rendus photoréalistes à partir d’une seule image d’entrée ou invite.
- Mode 8 (Personnalisation) : Mettez Gen-1 à votre service en ajustant le modèle pour une meilleure précision.
Ci-dessous, vous trouverez une vidéo montrant Runway AI expliquant les fonctionnalités de Gen-2.
Runway Gen-2 semble plus soucieux de créer des vidéos à partir de zéro, même si de nombreux qualificatifs doivent nuancer ce jugement. Il y a un grave manque d’accessibilité et les vidéos de démonstration que Runway a publiées sont courtes, fragiles et pas du tout photoréalistes.
« Vous pouvez générer une poursuite en voiture, mais parfois les voitures peuvent s’envoler. »
-Co-fondateur et PDG de Runway, Cris Valenzuela
Apprendre comment utiliser le copilote Microsoft 365 et maîtrisez facilement Word, Excel, etc.
Comment utiliser l’IA texte-vidéo Runway Gen-2 ?
Ceux qui veulent le produit peuvent avoir du mal à l’obtenir pour l’instant. L’entreprise Runway, qui développe des outils de cinéma et de montage basés sur l’IA, a annoncé la disponibilité sur liste d’attente de son système Gen 2 AI ; les parties intéressées peuvent s’inscrire pour y accéder sur un site fermé Chaîne discordeauquel d’autres utilisateurs seront ajoutés chaque semaine.
Cette partie sera mise à jour lorsque Runway Gen-2 sera rendu public.
Sa version limitée est l’exemple le plus médiatisé de génération de texte en vidéo à ce jour en dehors d’un environnement contrôlé. La filiale Google d’Alphabet Inc. et la société Meta Platforms Inc. ont toutes deux fait la démonstration d’un travail de synthèse vidéo l’année dernière, en utilisant des exemples tels qu’un ours en peluche faisant la vaisselle et un voilier sur un lac. Pourtant, ni l’un ni l’autre n’a révélé son intention de mener le travail au-delà de la phase de recherche.
Date de sortie de la piste Gen-2
Un porte-parole officiel de Runway, Kelsey Rondenet, a déclaré à The Verge que la société « offrira un large accès dans les semaines à venir ».
Vérifiez Page Officielle ou lire le papier pour plus d’informations.
Courtoisie d’image : Piste
IA 101
Êtes-vous nouveau à l’IA? Vous pouvez toujours monter dans le train AI ! Nous avons créé une fiche détailléeGlossaire IApour les plus couramment utiliséstermes d’intelligence artificielleet expliquer lebases de l’intelligence artificielleaussi bien querisques et avantages de l’IA. N’hésitez pas à les utiliser. Apprentissagecomment utiliser l’IAchange la donne !
Autres outils d’IA que nous avons examinés
Presque chaque jour, un nouvel outil, modèle ou fonctionnalité apparaît et change nos vies, comme GPT-4, et nous avons déjà passé en revue certains des meilleurs :
- Outils d’IA texte-texte
Voulez-vous apprendrecomment utiliser ChatGPT efficacement ?Nous avons quelques trucs et astuces pour vous sans passer àChatGPT Plus!Ingénierie rapide de l’IAest la clé des mondes illimités, mais vous devez être prudent ; lorsque vous souhaitez utiliser l’outil AI, vous pouvez obtenir des erreurs telles que « ChatGPT est à pleine capacité en ce moment »et« trop de demandes en 1 heure, réessayez plus tard ». Oui, ce sont des erreurs vraiment ennuyeuses, mais ne vous inquiétez pas ; nous savons comment les réparer.
- Outils d’IA de conversion de texte en image
- Machine à remonter le temps MyHeritage AI
- Refaire l’application
- IA de l’aube
- Lensa IA
- Meitu AI Art
- Diffusion stable
- DALL-E 2
- Google Muse IA
- Artbreeder IA
- À mi-parcours
- IA DreamBooth
- Rêve de Wombo
- Tome IA
- IA intérieure
- NightCafe IA
- QQ différente dimension moi
- Générateurs de visages aléatoires
- Chat visuelGPT
Alors qu’il y a encore quelquesdébats sur les images générées par l’intelligence artificielleles gens recherchent toujoursmeilleurs générateurs d’art AI.L’IA remplacera-t-elle les designers? Continuez à lire et découvrez.
- Autres outils d’IA
Voulez-vous plus d’outils? Vérifiezmeilleurs générateurs d’art IA gratuits.