Asistente de guiones▸ 
Apps AI 
Noticias AI 
UniVG: modelo de generación de vídeo de Baidu
UniVG: modelo de generación de vídeo de BaiduIntroducción
Baidu UniVG es un sistema unificado de generación de vídeo con modo ai, capaz de realizar generación de vídeo tomando como condiciones de entrada cualquier combinación de texto e imágenes. El sistema UniVG, desarrollado por el equipo de Baidu, resuelve las limitaciones de los modelos de generación de vídeo existentes a la hora de abordar una única tarea o un único objetivo.
Dirección de código abierto de UniVG:https://univg-baidu.github.io/
Principales funciones y características de UniVG:
Generación de vídeo con alto grado de libertad: utiliza un mecanismo de atención cruzada con múltiples condiciones para generar vídeos coherentes con la semántica a partir de las imágenes o el texto introducidos.
Generación de vídeo con bajo grado de libertad: introduce ruido gaussiano sesgado en lugar de ruido gaussiano completamente aleatorio, para preservar mejor el contenido de las condiciones de entrada.
Procesamiento multitarea: el modelo de generación de vídeo dentro del sistema se reorganiza en dos categorías, generación con alto grado de libertad y generación con bajo grado de libertad, aplicables respectivamente a distintas tareas de generación.
Modelo de difusión: método de generación de vídeo basado en difusión, que ha alcanzado un éxito notable tanto en el ámbito académico como en el industrial.
Escenarios de aplicación y ventajas de UniVG:
Entrada flexible: los usuarios pueden introducir condiciones de imagen y texto de forma flexible, ya sea por separado o combinadas, para satisfacer las necesidades de escenarios de aplicación reales.
Salida de alta calidad: consigue el FVD (Fréchet Video Distance) más bajo en la base de datos MSR-VTT, supera en evaluaciones humanas a los métodos actuales de código abierto y es comparable al método cerrado existente Gen2.
Tareas diversificadas: admite múltiples tareas de generación de vídeo, como texto a vídeo, imagen a vídeo y la combinación de texto e imagen a vídeo.
UniVG, como una potente herramienta, impulsa la tecnología de generación de vídeo hacia una mayor flexibilidad y calidad al integrar entradas de texto e imagen, ofreciendo nuevas ideas de promoción para diversos campos como la creación de contenidos, la publicidad y el entretenimiento.
