Gen-3 Alpha : le modèle de génération vidéo de nouvelle génération signé Runway 203

Runway lance une nouvelle génération de modèles de génération de vidéo, Gen-3 Alpha, qui permet un contrôle temporel fin. Gen-3 offre une fidélité et une cohérence accrues, capable de générer des personnages humains réalistes aux expressions riches, offrant un large éventail d'actions, de gestes et d'émotions, ouvrant ainsi de nouvelles opportunités narratives.

Gen-3 Alpha présente des avantages notables dans les domaines suivants : entraînement multimodal, divers outils de génération, contrôle temporel fin, génération d'images et de vidéos de haute qualité, modes de contrôle avancés, ainsi qu'une architecture informatique et de stockage efficace.

Gen-3 Alpha est le premier d'une série de modèles que Runway va entraîner sur une nouvelle infrastructure conçue pour l'entraînement multimodal à grande échelle. Par rapport à Gen-2, il apporte des améliorations significatives en termes de fidélité, de cohérence et de mouvement, et constitue également une étape vers la construction d'un modèle mondial généraliste.

Fonctionnalités de Gen-3 Alpha :

• Fidélité et contrôlabilité élevées : par rapport à la génération précédente, Gen-3 Alpha présente des améliorations notables en termes de fidélité, de cohérence et de mouvement, capable de générer des contenus vidéo plus réalistes et le mouvement, capable de générer des contenus vidéo plus réalistes et fluides.

• Prise en charge des entrées multimodales : Gen-3 Alpha prend en charge plusieurs modes de création, notamment la conversion texte-vidéo, image-vidéo, texte-image, offrant ainsi un choix diversifié pour la création.

• Contrôle temporel à grain fin : Gen-3 Alpha permet des transitions de scène précises, rendant les transitions vidéo plus naturelles et fluides.

• Génération de personnages réalistes : Gen-3 Alpha est capable de générer des personnages humains réalistes aux expressions et actions riches, spécialisé dans la génération de personnages avec diverses actions, gestes et émotions.

• Prise en charge de la personnalisation sectorielle : Gen-3 Alpha prend en charge la personnalisation sectorielle, permettant un contrôle plus stylisé et des personnages cohérents, avec des fonctionnalités répondant à des exigences artistiques et narratives spécifiques.

• Entraînement multimodal à grande échelle : cette série de modèles est entraînée sur une nouvelle infrastructure conçue pour l'entraînement multimodal à grande échelle.

• Effets photoréalistes : Gen-3 Alpha peut générer des vidéos photoréalistes d'un réalisme saisissant.

Présentation détaillée du projet Gen-3 Alpha :https://runwayml.com/blog/introducing-gen-3-alpha/