Zhipu Qingying: herramienta de generación de vídeo de Zhipu AI 176

Zhipu Qingying es la última herramienta de generación de vídeo con IA lanzada por Zhipu ai. Zhipu Qingying admite dos modos de generación de vídeo a partir de texto y de imagen a vídeo, capaz de generar rápidamente contenido de vídeo de 6 segundos con una resolución de hasta 1440x960 en solo 30 segundos.

Zhipu Qingying se construye sobre una base tecnológica de modelo multimodal grande, cuyo modelo núcleo de generación de vídeo es CogVideoX, que adopta una nueva arquitectura DiT, permitiendo una compresión más eficiente de la información del vídeo e integrando tres dimensiones: texto, tiempo y espacio. Además, Zhipu Qingying ofrece una alta capacidad de control, lo que permite a los usuarios dirigir el contenido del vídeo generado mediante el lenguaje.

Aspectos destacados y características de Zhipu Qingying:

Texto a vídeo: el usuario introduce una descripción o un guion en texto, y la IA genera el contenido del vídeo basándose en dicha información textual.

Imagen a vídeo: el usuario sube una o varias imágenes estáticas, y la IA analiza el contenido de las imágenes para generar un vídeo dinámico.

Adición de música de fondo: admite añadir música de fondo al vídeo generado, incluyendo estilos como tranquilo, alegre y animado, melancólico, épico, humorístico, entre otros.

Generación rápida: en comparación con otros productos similares del mercado, Qingying reduce significativamente el tiempo de generación de vídeo. El usuario solo necesita esperar unos 30 segundos para obtener un vídeo de 6 segundos, reduciendo el tiempo de inferencia de minutos a segundos, lo que mejora enormemente la eficiencia.

Alta capacidad de control: mediante la optimización de la tecnología y un modelo propio de comprensión de vídeo de extremo a extremo, Qingying mejora la capacidad de seguir las instrucciones del usuario, haciendo que el vídeo generado se ajuste mejor a la intención creativa del usuario. Al describir detalladamente la escena, el lenguaje de cámara y los detalles, el usuario puede obtener resultados satisfactorios, reduciendo el número de "pruebas y errores".

Diversidad de estilos: los usuarios pueden elegir diferentes estilos para crear, incluyendo, entre otros, dibujos animados 3D, blanco y negro, pintura al óleo y estética cinematográfica, satisfaciendo las necesidades de expresión personalizada y creativa.

Accesibilidad universal: el agente inteligente Qingying está abierto a todos los usuarios, tanto usuarios comunes como desarrolladores pueden utilizarlo fácilmente. Las empresas y desarrolladores también pueden integrarlo mediante llamadas a la API, incorporando las capacidades de texto a vídeo e imagen a vídeo en sus propias aplicaciones.

Música incorporada: Qingying también ofrece función de música, los vídeos generados por los usuarios pueden llevar música automáticamente, lo que simplifica el proceso de creación de vídeo y permite que incluso usuarios sin habilidades profesionales produzcan rápidamente contenido audiovisual atractivo.

Base tecnológica: el soporte técnico detrás de Qingying es el modelo grande de generación de vídeo CogVideoX, desarrollado internamente por Zhipu AI. Este modelo adopta una estructura DiT similar a la de Sora, capaz de integrar información textual, temporal y espacial, y la velocidad de inferencia del modelo optimizado es 6 veces más rápida que la de la generación anterior.

Características técnicas de Zhipu Qingying:

• Generación rápida: solo se necesitan 30 segundos para completar la generación de un vídeo de 6 segundos.

• Alta capacidad de seguimiento de instrucciones: incluso con prompts complejos, Qingying puede entenderlos y ejecutarlos con precisión.

• Coherencia del contenido: el vídeo generado puede reproducir de forma bastante fiel los procesos de movimiento del mundo físico.

• Flexibilidad en el encuadre: por ejemplo, la cámara puede seguir fluidamente el movimiento de los tres perros en la imagen.

Aplicaciones sectoriales de Zhipu Qingying:

• Producción publicitaria

• Edición cinematográfica

• Producción de vídeos cortos

• Creación de contenido creativo

¿Cómo usar Zhipu Qingying para generar vídeos?

1. Acceder a la plataforma: abra el sitio web oficial de Zhipu Qingyan, chatglm.cn/video, regístrese e inicie sesión.

2. Elegir el método de generación: en el agente inteligente Qingying, seleccione la función "AI Texto a Vídeo" o "AI Imagen a Vídeo".

3. Introducir los prompts:

• Texto a vídeo: introduzca una descripción detallada en texto o un guion. Cuanto más detallado sea el prompt, mayor será la calidad del vídeo generado. Por ejemplo, en lugar de escribir "un niño pequeño toma café", es mejor escribir "la cámara se desplaza lateralmente, un niño pequeño está sentado en un banco del parque, con una taza de café humeante en la mano. Lleva una camisa azul y parece muy feliz, el fondo es un parque lleno de árboles verdes, la luz del sol se filtra entre las hojas y cae sobre el niño".

• Imagen a vídeo: suba una o varias imágenes estáticas y elija el estilo de imagen. Puede utilizar el agente inteligente proporcionado por Qingying para generar prompts, asegurándose de que la descripción sea precisa y detallada.

4. Elegir el estilo y los parámetros del vídeo: seleccione el estilo de vídeo que desea generar, incluyendo dibujos animados 3D, blanco y negro, pintura al óleo, estética cinematográfica, etc. También puede configurar el ambiente emocional y el movimiento de cámara.

5. Añadir música de fondo: Qingying admite añadir música de fondo al vídeo generado, incluyendo estilos como tranquilo, alegre y animado, melancólico, épico, humorístico, entre otros.

6. Generar el vídeo: haga clic en el botón de generar vídeo; con un tiempo estimado de espera en cola de aproximadamente 1 minuto, obtendrá el resultado del vídeo. Qingying es capaz de completar la generación de un vídeo de 6 segundos en 30 segundos.

7. Optimizar los prompts:

La estructura del prompt debe ser lo más clara posible; las fórmulas complejas pueden incluir lenguaje de cámara, luz y sombra, descripción del sujeto, movimiento del sujeto, descripción de la escena y emoción/ambiente. Por ejemplo: "la cámara se desplaza lateralmente, un niño pequeño está sentado en un banco del parque, con una taza de café humeante en la mano. Lleva una camisa azul y parece muy feliz, el fondo es un parque lleno de árboles verdes, la luz del sol se filtra entre las hojas y cae sobre el niño".

Comparado con otras herramientas de generación de vídeo con IA, Zhipu Qingying es capaz de generar contenido de vídeo de 6 segundos en 30 segundos, lo que es mucho más rápido que muchas otras herramientas de generación de vídeo con IA. Por ejemplo, Kling AI, actualmente en el primer nivel, generalmente tarda entre 2 y 5 minutos en generar un solo vídeo de 5 segundos.

Durante el período de prueba inicial, Zhipu Qingying ofrece experiencia mediante llamadas a la API para empresas y desarrolladores, al mismo tiempo que proporciona un servicio de prueba gratuito para todos los usuarios del segmento C.