Runway dévoile son modèle IA de nouvelle génération Gen-4 : fidélité, capture dynamique du mouvement et cohérence des scènes 147

Qu'est-ce que Gen-4 ?

Gen-4 est le nouveau modèle d'ia générative de dernière génération officiellement lancé par Runway le 31 mars 2025. Par rapport à la version précédente, il apporte des améliorations notables en termes de fidélité de génération vidéo, de capture de mouvement dynamique, de cohérence de scène, ainsi que de compréhension et d'exécution des instructions de l'utilisateur. Il est capable de créer des contenus vidéo hautement cohérents et réalistes en s'appuyant sur des références visuelles et des instructions textuelles, prend en charge plusieurs résolutions et angles de vue, et offre une vitesse de génération élevée. Il est adapté à des scénarios tels que la production cinématographique et télévisuelle, le développement de jeux vidéo, la publicité et la création de contenu pour les réseaux sociaux.

Avancées techniques de Gen-4

• Fidélité améliorée : Gen-4 atteint un niveau de fidélité de pointe dans le secteur pour la génération vidéo, avec des détails fins et une reproduction précise des couleurs. Par rapport à la version Gen-3 Alpha, sa vitesse de génération a augmenté de 35 %, grâce à l'optimisation du framework de deep learning.

• Capture de mouvement dynamique : Gen-4 réalise une avancée majeure dans la capture de mouvement. Son algorithme exclusif est capable d'analyser en temps réel des trajectoires de mouvement complexes, rendant les vidéos générées plus naturelles et réalistes dans leurs effets dynamiques.

• Haute cohérence : Gen-4 résout le problème de la cohérence de scène. Qu'il s'agisse du personnage principal, des objets ou du style artistique global dans la vidéo, tout reste hautement cohérent et unifié.

• Compréhension et exécution précises : Gen-4 comprend plus profondément les prompts saisis par l'utilisateur et les exécute avec plus de précision. Il dispose en outre d'une capacité de « compréhension du monde » de premier plan, rendant le contenu généré plus conforme à la logique et aux lois physiques.

Fonctionnalités de Gen-4

• Combinaison de références visuelles et d'instructions : Gen-4 est capable de créer de nouvelles images et vidéos en combinant des références visuelles (telles que des images ou des vidéos) avec des instructions textuelles, garantissant ainsi la continuité du contenu et le contrôle de l'utilisateur sur le déroulement de l'histoire.

• Génération multi-angles : les utilisateurs peuvent spécifier différents angles et positions, et Gen-4 est capable de générer des scènes sous plusieurs perspectives.

• Résolutions de sortie multiples : Gen-4 prend en charge plusieurs résolutions vidéo, notamment 16:9, 9:16, 1:1, 4:3, 3:4 et 21:9.

Scénarios d'application de Gen-4

• Production cinématographique et télévisuelle : Gen-4 est capable de générer des contenus vidéo aux trajectoires de mouvement extrêmement réalistes et riches en dynamisme, ouvrant de toutes nouvelles possibilités pour la production audiovisuelle. Par exemple, l'équipe Runway a réalisé avec Gen-4 les courts-métrages « The Lonely Little Flame » et « New York is a Zoo », démontrant son puissant potentiel narratif et ses capacités en matière d'effets visuels.

• Développement de jeux vidéo : la haute cohérence et la capacité de capture de mouvement dynamique de Gen-4 permettent de générer rapidement des contenus vidéo de haute qualité dans la production vidéo pour les jeux, tout en réduisant les délais de réalisation.

• Publicité : Gen-4 permet de générer rapidement des vidéos publicitaires répondant aux besoins des utilisateurs.

• Création de contenu pour les réseaux sociaux : Gen-4 aide les créateurs à produire rapidement des vidéos courtes dans divers styles.

La fonctionnalité de génération vidéo à partir d'images de Gen-4 est désormais officiellement déployée pour tous les utilisateurs des offres payantes de Runway ainsi que pour ses clients entreprises, et Gen-4 prend actuellement en charge la génération de vidéos de 5 et 10 secondes.

Détails :https://runwayml.com/gen-4-bts