QianYing: Großmodell zur Generierung von Spielen mit Audio von Giant Network
QianYing: Großmodell zur Generierung von Spielen mit Audio von Giant NetworkEinführung
„QianYing 千影" ist ein von Giant Network eingeführtes Großmodell für Audio-Spiele, das das Großmodell für Spiele-Videogenerierung YingGame und das Großmodell für Video-Synchronisation YingSound umfasst. Es ermöglicht die Generierung von interaktiven Audio-Spielvideos und markiert einen technologischen Durchbruch im Bereich der KI-Spiele. YingGame wurde gemeinsam vom KI-Labor von Giant Network und dem SATLab der Tsinghua-Universität entwickelt und unterstützt die interaktive Steuerung vielfältiger Charakterbewegungen, sodass Benutzer Spielfiguren individuell anpassen können.

Hauptfunktionen von QianYing 千影
YingGame: Als Großmodell für die Generierung von Spiel-Videos kann es Open-World-Spielvideos erstellen und unterstützt die Steuerung von Charakterbewegungen durch Text, Bilder oder herkömmliche Tastatur- und Mausbedienung, sodass Benutzer Spielfiguren individuell anpassen können. Die Stärken von YingGame liegen in den vielfältigen Bewegungen und der individuellen Gestaltung der Charaktere sowie in physikalischen Simulationseigenschaften, die kein herkömmliches 3D-Modeling und Rendering erfordern.
YingSound: Ein Großmodell für Video-Synchronisation, das speziell dafür entwickelt wurde, passende Soundeffekte basierend auf dem Videobild zu erzeugen, einschließlich komplexer Umgebungsgeräusche und Charakterdialoge, ohne dass manuelle Prompts erforderlich sind. Es extrahiert die Semantik direkt aus dem Videoinhalt, um Audiodaten mit hoher Genauigkeit zu generieren. Die Generalisierungsfähigkeit von YingSound macht es für verschiedene Videotypen geeignet, von realen Szenen bis hin zu Anime und Spielen, und steigert die Immersion des Spiels.
Modelltechnologie von QianYing 千影:
YingGame: Wurde gemeinsam vom KI-Labor von Giant Network und dem SATLab der Tsinghua-Universität entwickelt und unterstützt die interaktive Steuerung vielfältiger Charakterbewegungen.
YingSound: Wurde gemeinsam vom KI-Labor von Giant Network, dem ASLP Lab der Northwestern Polytechnical University und der Zhejiang-Universität entwickelt und verfügt über eine äußerst starke Fähigkeit zur Zeitsynchronisation und zum Verständnis der Videosemantik.
Open-World-Spiel: YingGame kann Open-World-Spielvideos generieren und die interaktive Steuerung von Charakterbewegungen durch Text, Bilder oder Tastatur- und Mausbedienung ermöglichen.
Soundeffektgenerierung: YingSound kann basierend auf dem Bild passende komplexe Soundeffekte erzeugen und so Audio-Spielvideos realisieren.
Technologischer Durchbruch: Das Modell QianYing 千影 zeigt die Machbarkeit, Spielinhalte durch Textbeschreibungen zu generieren.
QianYing Co-Creation-Programm
Programmstart: Giant Network startet das „QianYing Co-Creation-Programm" und öffnet die Zusammenarbeit in den Bereichen Modelltechnologie, Anwendungen und originäre Spielprojekte.
Kooperationsbereiche: Umfasst Zusammenarbeit und Co-Creation in den Bereichen Modelltechnologie, Modellanwendungen, originäre Spielprojekte und mehr.
Anwendungsumsetzung: Beschleunigt die Umsetzung der Technologie „Spiele + KI" und fördert den Wandel von Kostensenkung und Effizienzsteigerung hin zu disruptiver Innovation.
Talentrekrutierung: Das Programm umfasst auch die Rekrutierung von Talenten, um die kontinuierliche Weiterentwicklung der Technologie zu unterstützen.
Offenheit: Das Programm zielt darauf ab, durch offene Zusammenarbeit die Reife und Anwendung der Technologie zu beschleunigen.
Giant Network stellte auf der Annual China Game Industry Conference 2024 das Großmodell zur Generierung von Audio-Spielen „QianYing 千影" vor und zeigte damit eine bedeutende technologische Entwicklung von Giant Network im Bereich „KI-Spiele".
Drehbuch-Assistent▸
AI Apps
AI Nachrichten