QianYing: el gran modelo de generación de juegos con audio de Giant Network 135

"千影QianYing" es un modelo grande de juegos con audio lanzado por Giant Network, que incluye el modelo grande de generación de vídeo para juegos YingGame y el modelo grande de doblaje de vídeo YingSound. Permite la generación de vídeos de juegos interactivos con audio, marcando un avance tecnológico en el campo de los juegos de ai. YingGame fue desarrollado conjuntamente por el Laboratorio de IA de Giant Network y el SATLab de la Universidad de Tsinghua, admite el control interactivo de diversas acciones de los personajes y permite a los usuarios personalizar los personajes del juego.

千影QianYing的主要功能

• YingGame: como modelo grande de generación de vídeo para juegos, puede crear vídeos de juegos de mundo abierto, admite el control de las acciones de los personajes mediante texto, imágenes o el uso tradicional de teclado y ratón, y permite a los usuarios personalizar los personajes del juego. Los puntos fuertes de YingGame residen en la diversidad de movimientos de los personajes y el diseño personalizado, así como en sus características de simulación física que no requieren el 3D modelado y renderizado tradicionales.

• YingSound: modelo grande de doblaje de vídeo, especializado en generar efectos de sonido que coincidan con las imágenes del vídeo, incluidos sonidos ambientales complejos y diálogos de personajes, sin necesidad de prompts manuales, ya que extrae directamente la semántica del contenido del vídeo para una generación de audio de alta precisión. La capacidad de generalización de YingSound lo hace adecuado para múltiples tipos de vídeo, desde escenas reales hasta anime y juegos, mejorando la inmersión en el juego.

千影QianYing模型技术：

• YingGame: desarrollado conjuntamente por el Laboratorio de IA de Giant Network y el SATLab de la Universidad de Tsinghua, admite el control interactivo de diversas acciones de los personajes.

• YingSound: desarrollado conjuntamente por el Laboratorio de IA de Giant Network, el ASLP Lab de la Universidad Politécnica del Noroeste y la Universidad de Zhejiang, cuenta con una extraordinaria capacidad de alineación temporal y comprensión semántica del vídeo.

• Juegos de mundo abierto: YingGame puede generar vídeos de juegos de mundo abierto y permite el control interactivo de las acciones de los personajes mediante texto, imágenes o el uso de teclado y ratón.

• Generación de efectos de sonido: YingSound puede generar efectos de sonido complejos que coincidan con las imágenes, logrando vídeos de juegos con audio.

• Avance tecnológico: el modelo 千影QianYing demuestra la viabilidad de generar contenido de juegos mediante descripciones de texto.

千影共创计划

• Lanzamiento del plan: Giant Network puso en marcha el "Plan de Cocreación 千影", abriendo la cooperación en tecnología de modelos, aplicaciones y proyectos de juegos originales.

• Áreas de cooperación: incluye la cooperación y cocreación en tecnología de modelos, aplicaciones de modelos y proyectos de juegos originales.

• Aplicación práctica: acelera la implementación de la tecnología "juego + IA", promoviendo la transformación desde la reducción de costes y el aumento de la eficiencia hasta la innovación disruptiva.

• Reclutamiento de talento: el plan también incluye el reclutamiento de talento para apoyar el desarrollo continuo de la tecnología.

• Apertura: el plan tiene como objetivo acelerar la madurez y la aplicación de la tecnología mediante la cooperación abierta.

Giant Network presentó el modelo grande de generación de juegos con audio "千影 QianYing" en la Conferencia Anual de la Industria China del Juego 2024, mostrando un importante desarrollo tecnológico de Giant Network en el campo de los "juegos con IA".