Zhipu Qingying : outil de génération vidéo de Zhipu AI

Zhipu Qingying : outil de génération vidéo de Zhipu AI 193

Le tout dernier outil de génération vidéo IA de Zhipu AI. Zhipu Qingying prend en charge deux modes : texte-vers-vidéo et image-vers-vidéo, et génère rapidement des vidéos de 6 secondes en seulement 30 secondes.

#Ai工具箱 #Ai视频生成

Zhipu Qingying : outil de génération vidéo de Zhipu AIIntroduction

智谱清影 est le dernier outil de génération de IA de vidéo lancé par Zhipu AI. 智谱清影 prend en charge deux modes : la génération de vidéo à partir de texte et la génération de vidéo à partir d'images. Il peut générer rapidement une vidéo de 6 secondes avec une résolution allant jusqu'à 1440x960, en seulement 30 secondes.

智谱清影 est construit sur une base technique de grand modèle multimodalodal. Son modèlee central de génération vidéo est CogVideoX, qui adopte une nouvelle architecture DiT, permettant une compression plus efficace des informations vidéo et fusionnant les trois dimensions : texte, temps et espace. De plus, 智谱清影 offre une grande contrôlabilité, permettant aux utilisateurs de guider le contenu de la vidéo générée via le langage.

智谱清影.jpg

Points forts et fonctionnalités de 智谱清影 :

Texte vers vidéo : l'utilisateur saisit une description textuelle ou un script, et l'IA génère le contenu vidéo à partir de ces informations textuelles.

Image vers vidéo : l'utilisateur télécharge une ou plusieurs images statiques, et l'IA analyse le contenu de l'image pour générer une vidéo dynamique.

Ajout de musique de fond : prend en charge l'ajout de musique de fond à la vidéo générée, y compris des styles calme, détendu et joyeux, mélancolique, épique, humoristique, etc.

Génération rapide : par rapport à d'autres produits similaires sur le marché, 清影 réduit considérablement le temps de génération vidéo. L'utilisateur n'a qu'à attendre environ 30 secondes pour obtenir une vidéo de 6 secondes. Le temps d'inférence est passé de l'ordre des minutes à celui des secondes, améliorant ainsi greatly l'efficacité.

Haute contrôlabilité : 清影 améliore la capacité à suivre les instructions de l'utilisateur grâce à des technologies d'optimisation et à un modèle de compréhension vidéo de bout en bout développé en interne, rendant la vidéo générée plus proche de l'intention créative de l'utilisateur. En décrivant en détail la scène, le langage caméra et les détails, les utilisateurs peuvent obtenir des résultats satisfaisants, réduisant ainsi le nombre d'essais et d'erreurs.

Styles variés : les utilisateurs peuvent choisir différents styles pour leur création, notamment, sans s'y limiter, 3D cartoon, noir et blanc, peinture à l'huile et style cinématographique, répondant aux besoins d'expression personnalisée et créative.

Accessible à tous : l'agent intelligent 清影 est ouvert à tous les utilisateurs, qu'ils soient utilisateurs ordinaires ou développeurs, et est facile à utiliser. Les entreprises et les développeurs peuvent également l'intégrer dans leurs propres applications via des appels d'API pour bénéficier des capacités de génération vidéo à partir de texte et d'images.

Musique intégrée : 清影 propose également une fonction de musique de fond. Les vidéos générées par les utilisateurs peuvent être automatiquement accompagnées de musique, simplifiant ainsi le processus de création vidéo et permettant même aux utilisateurs sans compétences professionnelles de produire rapidement du contenu vidéo attrayant et sonore.

Base technique : la technologie derrière 清影 est le grand modèle de génération vidéo CogVideoX développé en interne par Zhipu AI. Ce modèle adopte une architecture DiT similaire à celle de Sora, capable de fusionner les informations textuelles, temporelles et spatiales. Le modèle optimisé est 6 fois plus rapide que la génération précédente.

Caractéristiques techniques de 智谱清影 :

  • Génération rapide : une vidéo de 6 secondes peut être générée en seulement 30 secondes.

  • Excellente capacité à suivre les instructions : même avec des prompts complexes, 清影 peut les comprendre et les exécuter avec précision.

  • Cohérence du contenu : la vidéo générée peut reproduire de manière satisfaisante les processus de mouvement du monde physique.

  • Flexibilité de cadrage : par exemple, la caméra peut suivre fluidement les trois chiens présents dans l'image.

Applications sectorielles de 智谱清影 :

  • Production publicitaire

  • Montage cinématographique

  • Production de vidéos courtes

  • Création de contenu créatif

Comment utiliser 智谱清影 pour générer une vidéo ?

1. Accéder à la plateforme :Ouvrez le site officiel de Zhipu Qingyan chatglm.cn/video, inscrivez-vous et connectez-vous à votre compte.

2. Choisir le mode de génération :Dans l'agent intelligent 清影, sélectionnez la fonction « AI Texte vers vidéo » ou « AI Image vers vidéo ».

3. Saisir le prompt :

  • Texte vers vidéo : saisissez une description textuelle ou un script détaillé. Plus le prompt est détaillé, plus la qualité de la vidéo générée est élevée. Par exemple, au lieu de saisir « un petit garçon boit du café », il vaut mieux saisir « un panoramique caméra, un petit garçon est assis sur un banc dans un parc, tenant une tasse de café fumant. Il porte une chemise bleue et semble très heureux. L'arrière-plan est un parc ombragé par des arbres verdoyants, et la lumière du soleil filtre à travers les feuilles et éclaire le garçon ».

  • Image vers vidéo : téléchargez une ou plusieurs images statiques et choisissez le style d'image. Vous pouvez utiliser les agents intelligents fournis par 清影 pour générer des prompts, afin de garantir une description précise et détaillée.

4. Choisir le style et les paramètres de la vidéo :Choisissez le style de vidéo souhaité, notamment cartoon 3D, noir et blanc, peinture à l'huile, style cinématographique, etc. Vous pouvez également définir l'ambiance émotionnelle et le mouvement de caméra.

5. Ajouter de la musique de fond :清影 prend en charge l'ajout de musique de fond à la vidéo générée, avec des styles tels que calme, détendu et joyeux, mélancolique, épique, humoristique, etc.

6. Générer la vidéo :Cliquez sur le bouton de génération de vidéo. Le temps d'attente estimé dans la file d'attente est d'environ 1 minute. 清影 peut générer une vidéo de 6 secondes en seulement 30 secondes.

7. Optimiser le prompt :

La structure du prompt doit être aussi claire que possible. Une formule complexe peut inclure le langage caméra, la lumière et les ombres, la description du sujet, le mouvement du sujet, la description de la scène et l'émotion/ambiance. Par exemple : « un panoramique caméra, un petit garçon est assis sur un banc dans un parc, tenant une tasse de café fumant. Il porte une chemise bleue et semble très heureux. L'arrière-plan est un parc ombragé par des arbres verdoyants, et la lumière du soleil filtre à travers les feuilles et éclaire le garçon ».

Par rapport à d'autres outils de génération vidéo IA, 智谱清影 est capable de générer une vidéo de 6 secondes en 30 secondes, ce qui est nettement plus rapide que de nombreux autres outils de génération vidéo IA. Par exemple, Kling AI, actuellement considéré comme faisant partie des meilleurs outils, prend généralement entre 2 et 5 minutes pour générer une seule vidéo de 5 secondes.

Pendant la période de test initiale, 智谱清影 offre aux entreprises et aux développeurs un accès via API, tout en proposant simultanément un essai gratuit à tous les utilisateurs grand public.

Outils liés à Zhipu Qingying : outil de génération vidéo de Zhipu AI