ToonCrafter: genera automáticamente fotogramas de transición para animación de dibujos animados 220

ToonCrafter genera automáticamente fotogramas de transición de animación cartoon y colorea automáticamente bocetos de animación basándose en imágenes de referencia. Mediante un método de interpolación generativa, ToonCrafter crea fotogramas intermedios naturales y coherentes entre los fotogramas de la animación cartoon. Es capaz de manejar movimientos no lineales complejos y problemas de oclusión, haciendo que las transiciones de la animación sean más suaves y naturales. También puede colorear bocetos basándose en imágenes de referencia.

Solo necesitas proporcionar una o dos imágenes de referencia, y el sistema coloreará el boceto de entrada según los colores y el estilo de las imágenes de referencia.

ToonCrafter puede adaptarse a diferentes estilos de animación, ya sea una animación simple de líneas o una escena cartoon compleja, y la maneja con facilidad.

ToonCrafter es una herramienta desarrollada conjuntamente por la Universidad China de Hong Kong, la Universidad de la Ciudad de Hong Kong y el laboratorio de inteligencia artificial de Tencent, diseñada para ayudar a los animadores a generar y optimizar de forma más eficiente los efectos de transición de animaciones cartoon. Esta herramienta resuelve el problema de las transiciones antinaturales entre fotogramas en la animación cartoon mediante modelos generativos y técnicas de interpolación, mejorando la eficiencia y la calidad de la producción de animación.

Funciones de ToonCrafter:

Interpolación cartoon generativa: ToonCrafter adopta un método de interpolación generativa capaz de crear fotogramas intermedios naturales y coherentes entre los fotogramas de la animación cartoon. Este método puede manejar movimientos no lineales complejos y problemas de oclusión, haciendo que las transiciones de la animación sean más suaves y naturales. Independientemente de si el estilo de animación es simple o complejo, ToonCrafter puede adaptarse.

Se muestra un ejemplo de cómo, al crear una animación de carrera, ToonCrafter genera los fotogramas intermedios entre cada paso del personaje, haciendo que el movimiento de carrera parezca coherente y realista.

Interpolación guiada por bocetos: ToonCrafter también permite a los usuarios guiar el proceso de interpolación mediante bocetos. Los usuarios pueden proporcionar bocetos dispersos, y el sistema generará fotogramas intermedios que se ajusten a sus expectativas según estos bocetos. Este método permite un control detallado de la transición de la animación, mejorando la precisión y personalización del resultado de la interpolación.

Se muestra un ejemplo de cómo, al crear una animación de saludo con la mano, el usuario solo necesita dibujar los movimientos inicial y final, y ToonCrafter generará el proceso de saludo intermedio.

Dirección del proyecto ToonCrafter:https://huggingface.co/spaces/Doubiiu/tooncrafter

ToonCrafter Github:https://github.com/ToonCrafter/ToonCrafter