MIMO: genera personajes animados controlables a partir de imágenes estáticas o vídeos 223

La tecnología MIMO de Alibaba, presentada por el Instituto de Investigación de Computación Inteligente del Grupo Alibaba, es capaz de generar rápidamente personajes animados controlables a partir de imágenes estáticas o vídeos, reduciendo significativamente la barrera de entrada para la producción de personajes en 3D. A diferencia de los métodos tradicionales de generación de personajes 3D, MIMO puede sustituir los personajes del vídeo manteniendo la coherencia de movimientos y expresiones, tanto si se trata de personas reales como de personajes de animación 2D.

Las principales ventajas de MIMO radican en su comodidad y eficiencia, lo que lo hace adecuado para múltiples escenarios de aplicación.

Aplicaciones de Alibaba MIMO:

• Animación de avatares virtuales: los usuarios pueden transformar imágenes estáticas en personajes dinámicos mediante sencillas instrucciones, aplicable a diversos escenarios.

• Efectos especiales para cine: MIMO es capaz de extraer movimientos complejos de vídeos del mundo real y aplicarlos a personajes virtuales, permitiendo que los personajes generados interactúen de forma natural con los objetos de escenas reales, gestionando oclusiones y efectos de profundidad de campo para obtener resultados animados más realistas.

• Diseño de personajes para videojuegos: los desarrolladores de juegos pueden utilizar MIMO para crear rápidamente una amplia variedad de personajes, mejorando la eficiencia del desarrollo y reduciendo la dificultad de la producción de animaciones.

¿Cómo se utiliza Alibaba MIMO?

• Proporcionar material: el usuario solo necesita aportar una imagen estática o un vídeo como material de referencia.

• Introducir instrucciones: mediante sencillas instrucciones de movimiento, el usuario puede especificar las acciones y el comportamiento del personaje.

• Generar animación: el sistema transforma rápidamente el material y las instrucciones proporcionados en un personaje virtual controlable, ya sea realista, de estilo cartoon o antropomórfico, lográndolo con facilidad.

• Combinación flexible: el usuario puede combinar libremente diferentes elementos, como imágenes de personajes, secuencias de movimiento o vídeos de escenas, para conseguir efectos animados muy variados.

Ventajas de Alibaba MIMO:

• Eficiencia y comodidad: en comparación con los métodos tradicionales de generación de personajes 3D, MIMO no requiere capturas desde múltiples ángulos ni entrenamientos independientes, lo que aumenta considerablemente la eficiencia.

• Amplia aplicabilidad: es adecuado para la animación de avatares virtuales, efectos especiales para cine, diseño de personajes para videojuegos y muchos otros campos.

• Interacción realista: los personajes generados pueden interactuar de forma natural con los objetos presentes en escenas reales, gestionando oclusiones y efectos de profundidad de campo para ofrecer resultados animados muy convincentes.

Además, MIMO también permite extraer movimientos complejos de vídeos del mundo real y aplicarlos a personajes virtuales, logrando efectos animados más realistas. Los usuarios pueden combinar libremente diferentes elementos, como imágenes de personajes, secuencias de movimiento o vídeos de escenas, para conseguir efectos animados variados, aumentando así la eficiencia creativa.

Dirección del proyecto Alibaba MIMO:https://menyifang.github.io/projects/MIMO/index.html