ToonCrafter : génération automatique d'images intermédiaires pour l'animation de dessins animés 229

ToonCrafter génère automatiquement des images intermédiaires pour les animations cartoon et applique automatiquement des couleurs aux croquis d'animation en se basant sur des images de référence. Grâce à une méthode d'interpolation générative, ToonCrafter produit des images intermédiaires naturelles et cohérentes entre les frames d'animation cartoon. Il est capable de gérer des mouvements non linéaires complexes et les problèmes d'occlusion, rendant les transitions d'animation plus fluides et naturelles. Il peut également colorier des croquis en fonction d'images de référence.

Il vous suffit de fournir une ou deux images de référence, et le système appliquera des couleurs à vos croquis en s'inspirant des couleurs et du style des images fournies.

ToonCrafter s'adapte à différents styles d'animation, qu'il s'agisse d'animations au trait simples ou de scènes cartoon complexes, et les traite sans difficulté.

ToonCrafter est un outil développé conjointement par l'Université chinoise de Hong Kong, l'Université de la ville de Hong Kong et le laboratoire d'intelligence artificielle de Tencent, visant à aider les animateurs à générer et optimiser plus efficacement les transitions des animations cartoon. Grâce à des modèles génératifs et à des techniques d'interpolation, cet outil résout le problème des transitions peu naturelles entre les frames dans les animations cartoon, améliorant ainsi l'efficacité et la qualité de la production d'animation.

Fonctionnalités de ToonCrafter :

Interpolation cartoon générative : ToonCrafter utilise une méthode d'interpolation générative capable de produire des images intermédiaires naturelles et cohérentes entre les frames d'animation cartoon. Cette méthode peut gérer des mouvements non linéaires complexes et les problèmes d'occlusion, rendant les transitions d'animation plus fluides et naturelles. Quel que soit le style d'animation, simple ou complexe, ToonCrafter s'y adapte.

Un exemple illustre comment, lors de la création d'une animation de course, ToonCrafter génère les images intermédiaires entre chaque pas du personnage, rendant ainsi le mouvement de course cohérent et réaliste.

Interpolation guidée par croquis : ToonCrafter permet également aux utilisateurs de guider le processus d'interpolation à l'aide de croquis. Les utilisateurs peuvent fournir des croquis稀疏s en entrée, et le système générera des images intermédiaires conformes aux attentes de l'utilisateur. Cette approche permet un contrôle fin des animations et améliore la précision et la personnalisation des résultats d'interpolation.

Un exemple illustre comment, lors de la création d'une animation de salutation, l'utilisateur n'a qu'à dessiner les mouvements de début et de fin, et ToonCrafter génère le mouvement de salutation intermédiaire.

Adresse du projet ToonCrafter :https://huggingface.co/spaces/Doubiiu/tooncrafter

ToonCrafter Github :https://github.com/ToonCrafter/ToonCrafter