Assistant scénario▸ 
Apps AI 
Actualités AI 
Magic Animate_云技派,专注ai人工智能!
Magic Animate_云技派,专注ai人工智能!Introduction
Magic Animate est un projet open source révolutionnaire qui simplifie la création d'animations, vous permettant de réaliser des vidéos animées à partir d'une seule image et d'une vidéo dynamique. En termes simples, à partir d'une image de référence et d'une séquence de poses (vidéo), il peut générer une vidéo animée qui suit le mouvement des poses tout en préservant les caractéristiques d'identité de l'image de référence. Il a été développé par le Show Lab de l'Université nationale de Singapour et ByteDance.
Magic Animate offre la meilleure cohérence parmi toutes les solutions de vidéos de danse, mais le visage et les mains de Magic Animate peuvent présenter quelques distorsions. La configuration par défaut peut entraîner une transition stylistique de l'anime vers le réalisme, en particulier au niveau du visage dans la vidéo. Appliquer un style anime à la vidéo de pilotage DensePose par défaut affecte également les proportions corporelles.
Adresse du site officiel de Magic Animate :www.magicanimate.org
Fonctionnalités principales de MagicAnimate :
Créer des animations à partir d'une seule image et d'une vidéo dynamique
Maintenir la cohérence temporelle
Préserver l'image de référence
Améliorer la fidélité de l'animation
Intégration avec les modèles de diffusion T2I comme DALLE3
Animation inter-identités et animation issue de domaines inconnus
Animation d'images à partir de prompts textuels
Maintien d'une haute cohérence dans les solutions de vidéos de danse
Comment utiliser MagicAnimate ?
Pour utiliser Magic Animate, vous devez télécharger le modèle de base pré-entraîné de StableDiffusion V1.5 et le VAE affiné par MSE. Ensuite, vous pouvez installer les dépendances nécessaires et activer l'environnement conda. Puis, téléchargez une photo statique d'une personne et importez la vidéo de démonstration du mouvement que vous souhaitez générer, et ajustez les paramètres. Ensuite, vous pouvez essayer la démo en ligne sur Huggingface ou Replicate. De plus, vous pouvez utiliser l'API Replicate pour générer des vidéos animées de manière programmée.
