La piste a annoncé la sortie de son dernier outil, Act-One, conçu pour améliorer l’animation des personnages avec plus de réalisme et d’expressivité. Ce nouvel ajout à la suite Gen-3 Alpha marque une avancée significative dans la façon dont les modèles génératifs sont utilisés pour créer des actions en direct et du contenu animé.
Comment fonctionne Act-One de Runway ?
Traditionnellement, la création d’animations faciales nécessite des flux de travail complexes impliquant la capture de mouvement, le réglage manuel du visage et plusieurs références de séquences. Ces méthodes visent souvent à capturer et reproduire les émotions de l’acteur dans un personnage numérique. Cependant, le défi réside dans la préservation de l’émotion et des nuances originales de la performance.
Avec Act-One, Runway introduit un processus rationalisé. L’outil génère des animations directement à partir de la performance vidéo et vocale d’un acteur, éliminant ainsi le besoin d’équipements supplémentaires tels que des appareils de capture de mouvement. Cette simplification permet aux créateurs d’animer plus facilement les personnages sans compromettre l’expressivité de la performance originale.
Act-One est polyvalent, permettant aux créateurs d’appliquer des animations à une grande variété d’images de référence, quelles que soient les proportions de la vidéo source. Il peut traduire avec précision les expressions faciales et les mouvements en caractères dont la taille et la forme peuvent différer de l’original. Cela ouvre de nouvelles portes à la conception de personnages inventifs, en particulier dans des domaines tels que la création de contenu animé.
L’outil brille également dans les environnements d’action en direct, produisant des sorties cinématographiques et réalistes qui maintiennent la fidélité sous différents angles de caméra. Cette fonctionnalité aide les créateurs à développer des personnages qui trouvent un écho auprès des téléspectateurs en délivrant une émotion et une expression authentiques, renforçant ainsi le lien entre le public et le contenu.
Runway mise gros sur l’IA avec un fonds de 5 millions de dollars pour les films expérimentaux
Runway positionne Act-One comme une solution permettant de créer des scènes de dialogue expressives qui étaient auparavant difficiles à réaliser avec des modèles génératifs. Avec seulement une caméra grand public et un seul acteur, les créateurs peuvent désormais générer des scènes impliquant plusieurs personnages, chacun représenté avec une profondeur émotionnelle.
« Notre approche utilise un pipeline complètement différent, piloté directement et uniquement par la performance d’un acteur et ne nécessitant aucun équipement supplémentaire », a déclaré Runway dans son blog, soulignant l’accent mis par l’outil sur la facilité d’utilisation pour les créateurs.
Runway reste déterminé à garantir que ses outils sont utilisés de manière responsable. Act-One est doté d’une gamme de fonctionnalités de sécurité, notamment des mesures permettant de détecter et de bloquer les tentatives de création de contenu mettant en vedette des personnalités publiques. Des protections supplémentaires incluent la vérification que les utilisateurs ont les droits sur les voix qu’ils créent à l’aide de voix personnalisées et la surveillance continue d’une éventuelle utilisation abusive de la plate-forme.
« Comme pour toutes nos versions, nous nous engageons à un développement et un déploiement responsables », a déclaré la société. Les Fondations pour des médias génératifs sûrs servent de base à ces mesures de sécurité, garantissant que le potentiel de l’outil est utilisé de manière sûre et éthique.
Une vision plus large pour l’avenir de l’animation
Avec le déploiement progressif d’Act-One qui commence aujourd’hui, Runway vise à rendre les outils d’animation avancés plus accessibles à un plus large éventail de créateurs. En supprimant les barrières à l’entrée et en simplifiant le processus d’animation, la société espère inspirer de nouvelles formes de narration créative.
« Act-One est une nouvelle étape dans notre objectif consistant à proposer des techniques auparavant sophistiquées à un plus large éventail de créateurs et d’artistes », a souligné Runway.
Crédit image en vedette : Piste