MoKi : outil de création de courtes vidéos IA par Meitu 172

Qu'est-ce que MoKi

MOKI est un outil de création de courts métrages basé sur l'IA, lancé par Meitu le 12 juin 2024 lors de la 3e édition du Meitu Imaging Festival. Il s'appuie sur la version V5 du modèle MiracleVision, développé en interne par Meitu. La V5 utilise une architecture technique DiT maison. Il intègre également plusieurs moteurs de génération de vidéo tels que Vidu et Kling AI, couvrant l'ensemble du processus, du script au storyboard, en passant par la génération vidéo et jusqu'au doublage et à la musique de bande-son en post-production.

Fonctionnalités principales de MoKi

• Génération de script : saisissez un synopsis ou importez directement un script existant ; l'IA génère automatiquement un script complet avec storyboard et propose plusieurs options de paramétrage.

• Génération de storyboard : création automatique des images du storyboard à partir du script, avec possibilité de modifier manuellement la description et les personnages de chaque plan.

• Personnalisation des personnages : possibilité de téléverser une image de référence des traits du visage de face pour générer un personnage, ou d'utiliser la retouche IA pour modifier les vêtements, la coiffure, etc.

• Styles variés : prise en charge des styles manga chinois, 3D cartoon, livres pour enfants, manga japonais frais, etc. Le format d'image peut être choisi en paysage 16:9 ou en portrait 9:16.

• Voix off et musique : la voix off propose plusieurs options telles que jeune homme ensoleillé, dame douce, sage âgé, etc. La musique de fond offre également plusieurs styles, comme grandiose, enfantin et adorable, ou encore tendu et palpitant.

• Montage et post-production : interface de montage simple avec timeline et pistes audio, possibilité d'ajuster les mouvements de caméra (par exemple déplacement horizontal ou push-in), génération en un clic d'une vidéo avec bande-son, avec optimisation continue par la suite.

• Paramètres techniques : basé sur le grand modèle MiracleVision, la durée maximale d'une vidéo générée en une seule fois est de 5 secondes. Génération possible de vidéos d'1 minute, 24 images par seconde, en 1080p, avec ajout futur des fonctions 4K et de génération de vidéo à partir d'une image personnalisée.

Cas d'usage de MoKi

• Production de courts métrages d'animation

• Conversion de romans en ligne ou de scénarios en mini-séries

• Vidéos d'histoires illustrées pour enfants

• Création de clips musicaux (MV)

• Animation de supports pédagogiques

• Contenu pour les médias personnels (histoires du soir, animations éducatives, etc.)

• Publicités pour produits (en phase Bêta)

Avantages et inconvénients de MoKi

Avantages :

• Processus complet du script au produit fini en un seul endroit, sans avoir à basculer entre plusieurs outils

• Utilisation simple, interface conviviale, un film en seulement trois étapes

• Bonne compréhension du chinois, avec de belles performances dans les styles orientaux (manga chinois, etc.)

• Fonctionnalités couvrant tout le processus, y compris le doublage, la musique de fond et le montage

• Plusieurs styles visuels et voix au choix

Inconvénients :

• Les détails de l'image peuvent parfois être flous, avec des expressions et des mouvements peu précis

• La cohérence des personnages ou de l'arrière-plan entre les plans peut parfois poser problème

• Impossible d'importer de la musique de fond externe

• Uniquement disponible en version web, pas d'application mobile

• Les œuvres ne peuvent être téléchargées qu'en local, avec des options de partage limitées

• Vitesse de génération : environ 30 secondes pour le storyboard, environ 3 minutes pour le rendu vidéo

Comment utiliser MoKi

1. Accédez au site officiel www.moki.cn

2. Choisissez « Création avec script existant », saisissez un synopsis ou un thème et laissez l'IA générer le script ; vous pouvez également coller un par un des descriptions de plans écrites à l'extérieur.

3. Sélectionnez un style visuel (par exemple 3D cartoon ou manga chinois), concevez les personnages, réglez la voix off et le format d'image.

4. Cliquez sur « Commencer à générer les images ». L'IA affiche la liste des plans et la timeline. Vous pouvez vérifier et modifier le contenu des dialogues, ajuster la voix des personnages ; si un personnage ne convient pas, cliquez sur « Modifier » pour le régénérer.

5. Après avoir prévisualisé le résultat, cliquez sur « Commencer à générer la vidéo », attendez environ 3 minutes pour le rendu, puis téléchargez le fichier en local.

Comparaison de MoKi avec ses concurrents

Pourquoi choisir MoKi

• Tout le processus se fait sur une seule plateforme, sans avoir à jongler entre plusieurs outils, ce qui fait gagner du temps.

• Accessible aux débutants, le processus en trois étapes est très convivial pour les novices.

• Spécialement conçu pour le scénario du court métrage, avec un positionnement clair, ce n'est pas un outil généraliste qui fait tout mais sans excellence particulière.

• Meilleure compréhension du chinois et rendu plus naturel des styles chinois, idéal pour les créateurs en Chine.

• Appuyé par le grand modèle de Meitu, l'itération est garantie et les fonctionnalités sont en amélioration continue.