Xunguang : plateforme de création vidéo IA d'Alibaba DAMO Academy 130

寻光 est une plateforme de création de IA vidéo tout-en-un lancée par l'Institut DAMO d'Alibaba. 寻光 a fait sa première apparition à la Conférence mondiale sur l'intelligence artificielle (WAIC) de Shanghai en 2024, suscitant une large attention. L'objectif de 寻光 est de rendre le processus de montage vidéo aussi simple que l'utilisation d'un PowerPoint, permettant même aux utilisateurs non professionnels de créer efficacement du contenu vidéo de haute qualité.

寻光 aide les utilisateurs à réaliser sur une seule plateforme les étapes traditionnellement dispersées dans différents processus de production, telles que l'écriture de scénarios, la conception de storyboards et le montage de ressources vidéo, et assiste les utilisateurs dans la création de scénarios, de storyboards, etc.

寻光 prend en charge une édition IA riche sur les matériaux générés et téléchargés, avec plus de 10 fonctions telles que le contrôle des personnages, le contrôle des scènes, le contrôle des mouvements de caméra, l'ajout/suppression/modification d'objets cibles, etc. De plus, en termes d'interaction, il met l'accent sur « un montage vidéo aussi simple que l'utilisation d'un PowerPoint » et offre une capacité d'édition basée sur les calques vidéo, ainsi qu'une fonction de décomposition des calques.

Adresse officielle de 寻光 :https://xunguang.damo-vision.com/

Fonctions principales de 寻光 :

• Service tout-en-un : la plateforme 寻光 intègre tous les aspects de la production vidéo, notamment l'écriture de scénarios, la conception de storyboards et le montage de ressources, permettant aux créateurs de réaliser l'ensemble du processus de création vidéo sur une seule plateforme, sans avoir à basculer entre plusieurs outils.

• Capacités d'édition IA : la plateforme fournit des outils d'édition précis, permettant aux utilisateurs d'effectuer des modifications au niveau sémantique, comme le contrôle du contenu vidéo par des instructions textuelles, pour un contrôle intelligent des personnages, des scènes, des mouvements de caméra, etc. Les utilisateurs peuvent facilement ajuster les angles de vue, supprimer ou modifier des objets cibles, et même contrôler avec précision les mouvements du visage.

• Édition par calques vidéo : l'innovation de 寻光 réside dans sa fonction d'édition par calques vidéo, qui permet aux utilisateurs d'extraire et d'éditer facilement des objets spécifiques dans la vidéo, tels que des personnages ou des objets. Ces objets disposeront d'un fond transparent, facilitant leur fusion dans d'autres arrière-plans, même pour des détails complexes comme des cheveux flottants. Qu'il s'agisse de matériaux générés par IA ou filmés, toutes les fonctions d'édition vidéo peuvent être utilisées pour les modifier, avec des fonctions de décomposition et de fusion de calques, pour personnaliser votre contenu vidéo.

• Transfert de style et contrôle des mouvements de caméra : la plateforme prend en charge plus de 20 types de transfert de style, rendant la transformation du style vidéo simple. Parallèlement, elle offre un contrôle varié des effets de mouvement de caméra, tels que le panoramique, le zoom avant/arrière, le travelling circulaire, etc., pour renforcer l'impact visuel de la vidéo.

• Assistance au scénario et au storyboard : 寻光 ne simplifie pas seulement le montage en post-production, mais assiste également les utilisateurs dans la création préalable de scénarios et de storyboards, améliorant considérablement l'efficacité et l'espace créatif de la production vidéo.

• Storyboard, création en un clic : du scénario au storyboard, 寻光 permet à l'IA d'accompagner votre parcours de réalisation, plus besoin d'imaginer, les images surgissent naturellement, rendant instantanément vivante une belle histoire.

• Personnalisez les personnages de votre histoire : qui peut devenir votre protagoniste et jouer avec intensité dans votre histoire, c'est désormais à 寻光 de le créer exclusivement pour vous ; vos acteurs, c'est vous qui les choisissez.

• Création libre de ressources visuelles : laissez désormais 寻光 générer des personnages et des scènes cohérentes selon vos idées, puis utilisez le contrôle des mouvements de caméra et le montage du mouvement pour créer votre propre blockbuster personnel.

Conditions de candidature à la bêta de la plateforme de création vidéo 寻光 de l'Institut DAMO :

• Grand public, utilisateurs ordinaires et amateurs représentant la communauté UGC

• Utilisateurs semi-professionnels, créateurs de contenu indépendants ou petits studios représentant la communauté PUGC

• Utilisateurs professionnels, utilisant des flux de travail standard et réalisant des livraisons commerciales en équipe, représentant la communauté PGC

寻光 est développé par le Laboratoire de technologie visuelle de l'Institut DAMO, qui se consacre à la recherche sur la compréhension et la génération de signaux visuels multimodaux. Les axes de recherche actuels comprennent : une génération plus précise de contenus image/vidéo/3D, une édition plus contrôlable des contenus image/vidéo/3D, des cadres de génération plus efficaces, la génération augmentée par récupération multimodale, et un cadre unifié de compréhension-génération multimodale, etc.

Adresse officielle de 寻光 :https://xunguang.damo-vision.com/