Moyinmanga : outil de production audiovisuelle par IA, du scénario au film final en lot 124

Qu'est-ce que Moyin Creator

Moyin Creator (魔因漫创) est un outil open source de création audiovisuelle IA développé par l'équipe MemeCalculate, destiné au bureau, dédié à la production automatisée du scénario au film final, adapté aux scénarios de création en série tels que les courts-métrages, les séries d'animation et les bandes-annonces.

Moyin Creator lui-même ne contient pas de modèle d'IA, mais se connecte via API à des services tels que Jimeng Seedance 2.0 et SkyReels, pour réaliser le découpage du scénario, la génération des personnages et des scènes, ainsi que la vidéo montage. Il est sous licence GNU AGPL-3.0, autorisant l'utilisation et la modification libres ; les versions modifiées doivent être open source ; un usage commercial nécessite l'obtention d'une autorisation.

Fonctionnalités de Moyin Creator

📝 Analyse du scénario : décompose le scénario en scènes, plans et dialogues, identifie les personnages, les décors, les émotions et le langage cinématographique, prend en charge les structures multi-épisodes ou multi-actes.

🎭 Gestion des personnages : assure la cohérence visuelle grâce à 6 couches d'ancrage d'identité, prend en charge la gestion de la bible des personnages et la liaison d'images de référence.

🌄 Génération de scènes : composition multi-vues, conversion automatique des descriptions de scènes en invites visuelles ; les « quatre vues » garantissent la cohérence spatiale.

🎬 Storyboard导演 : paramètres de prise de vue réglables (position de caméra, zoom, mode de tournage), mise en page automatique et export, changement de style visuel en un clic.

⭐ Rendu de niveau S : intègre Seedance 2.0, prend en charge la fusion de vidéos narratives multi-plans, peut référencer des images, vidéos, audios et autres ressources multimodales.

Autres caractéristiques

• Automatisation complète : chaque étape s'enchaîne automatiquement, sans transfert manuel.

• Production en série : prend en charge le parallélisme des tâches et les nouvelles tentatives en cas d'échec.

• Orchestration multi-modèles : répartition de charge et rotation entre plusieurs fournisseurs d'IA.

• Système de storyboard professionnel : couvre les échelles de plan, les mouvements de caméra, les transitions et le contrôle du rythme.

Scénarios d'utilisation de Moyin Creator

• Vidéos courtes / courts-métrages : conversion rapide du scénario en film fini, réduction du cycle de production, un épisode passant de 3 à 5 jours à 3 à 5 heures.

• Séries d'animation : génération en masse de segments animés avec des personnages cohérents et un storyboard standardisé.

• Bandes-annonces / films conceptuels : génération directe de bandes-annonces visuelles à partir du scénario, pour propositions ou communication.

• Storyboards / préviz : création de préviz de storyboard économiques et de haute qualité pour projets cinématographiques ou jeux vidéo.

• Vidéos pédagogiques : les établissements d'enseignement peuvent personnaliser les contenus selon leurs besoins.

• Création publicitaire : génération rapide de plusieurs versions de ressources pour tests A/B.

Avantages et inconvénients de Moyin Creator

✅ Avantages

• Couvre l'ensemble du processus du scénario au film fini, simplifie les opérations.

• La technologie de cohérence des personnages résout un problème courant de la vidéo IA.

• Optimisé pour la production à grande échelle, prend en charge les tâches parallèles.

• Compatible avec les principaux grands modèles d'IA, combinables selon les besoins.

• Open source et gratuit, itération portée par la communauté.

• Repose sur Seedance 2.0, résultats pouvant atteindre un niveau commercial.

❌ Inconvénients

• Nécessite de fournir ses propres clés API, les appels aux modèles externes engendrent des frais.

• Le déploiement dépend de Node.js, seuil élevé pour les utilisateurs non techniques.

• Le contrôle précis de la cohérence stylistique est difficile, les résultats présentent des variations.

• Certains utilisateurs signalent des anomalies de la fonction d'étalonnage des personnages, la configuration peut être perdue.

• La qualité et la stabilité de génération dépendent des services tiers.

Comment utiliser Moyin Creator

Installation et déploiement

git clone https://github.com/MemeCalculate/moyin-creator.git
cd moyin-creator
npm install
npm run dev
npm run build

Configuration requise : Node.js ≥ 18, npm ≥ 9.

Configuration de l'API

Après le lancement, accédez à « Paramètres » → « Configuration de l'API » en haut à droite pour saisir les clés ; il est recommandé d'en configurer plusieurs pour améliorer la stabilité et la vitesse.

Processus de création

① Importer le scénario ; le système génère automatiquement un plan général et étalonne le storyboard, les personnages et les scènes

② Définir les paramètres des personnages et générer leurs apparences

③ Associer les scènes appropriées à chaque plan et générer des arrière-plans multi-vues

④ Configurer position de caméra, zoom, dialogues, effets sonores, etc., et intégrer

⑤ Rendu par lots pour générer le film final

Paramètres clés

• Modèle de génération d'images : par défaut Google nano banana

• Génération vidéo modèle : par défaut le modèle de test 1.5

• Nombre de processus : l'augmenter accélère le traitement par lots, mais nécessite davantage de clés API

• Cohérence visuelle : une fois activé, la dernière image est automatiquement convertie en image pour maintenir la transition entre scènes

• Hébergement d'images : ImgBB recommandé

Questions fréquentes sur Moyin Creator

Q1 : Est-ce gratuit ?

R : Moyin Creator est open source et gratuit, mais l'appel aux services d'IA est payant et nécessite l'achat de clés API.

Q2 : Les personnes sans bases en programmation peuvent-elles utiliser Moyin Creator ?

R : Pour l'instant, certaines compétences techniques sont requises ; un package d'installation en un clic pourrait être proposé à l'avenir.

Q3 : Quelle est la qualité vidéo ?

R : Elle dépend du modèle d'IA utilisé et des invites, limitée par les capacités du modèle sous-jacent.

Q4 : Comment garantir la cohérence des personnages ?

R : Grâce aux 6 couches d'ancrage d'identité et à la bible des personnages, en référençant la même image de référence entre les plans.

Q5 : Quels modèles Moyin Creator prend-il en charge ?

R : Il prend en charge les modèles vidéo et image Seedance 2.0, SkyReels-V4, etc., librement interchangeables.

Q6 : Que faire en cas de bug ?

R : Signalez-le via GitHub Issues ; les problèmes connus incluent l'anomalie d'étalonnage des personnages, la perte de configuration, etc. ; suivez les mises à jour.

Pour en savoir plus, vous pouvez d'abord regarder les tutoriels sur Bilibili, puis suivre les étapes de déploiement et d'utilisation.

Tutoriels Bilibili :https://space.bilibili.com/612396586/lists/7462950?type=season

Dépôt GitHub :https://github.com/MemeCalculate/moyin-creator

Actualités associées :

Plateformes de création de courts-métrages IA

Outils de production de bandes dessinées IA

Analyse complète du processus et des outils de production de bandes dessinées IA