Помощник сценариста▸ 
AI Приложения 
AI Новости Matrix-Zero: Kunlun Wanwei представляет первую в Китае 3D-модель мира
小编 ·
Matrix-Zero: Kunlun Wanwei представляет первую в Китае 3D-модель мира
Kunlun Wanwei 14 февраля 2025 года выпустила модель мира Matrix-Zero, став первой отечественной компанией, которая одновременно представила модели генерации 3D-сцен и генерации интерактивного видео.
Данная модель мира включает две подмодели: первая — модель генерации 3D-сцен, большая модель генерации 3D-сцен, способная преобразовывать изображения, введённые пользователем, в реалистичные 3D-сцены, доступные для свободного исследования, обладающая глобальной согласованностью, поддерживающая ввод изображений в различных стилях и перенос стилей, а также способная генерировать динамические физические эффекты. Вторая — большая модель генерации интерактивного видео, поддерживающая генерацию интерактивных видеоэффектов в реальном времени по запросам пользователя и обеспечивающая точное управление точкой обзора.
Функциональные характеристики Matrix-Zero
Большая модель генерации 3D-сцен:
Преобразование ввода: преобразует изображения, введённые пользователем, в реалистичные и логичные 3D-сцены, доступные для свободного исследования.
Глобальная согласованность: сгенерированная 3D-сцена остаётся согласованной при круговом обзоре на 360 градусов, без расхождений между видами.
Свободное исследование: поддерживает исследование в любом направлении на большие расстояния и в широком диапазоне.
Перенос стилей: поддерживает ввод изображений в различных стилях и способна генерировать 3D-сцены в разных стилях.
Генерация динамических сцен: поддерживает генерацию физических эффектов, таких как эффекты освещения, динамика брызг воды, динамика облаков и тумана.
Большая модель генерации интерактивного видео:
Управление на основе пользовательского ввода: генерация интерактивного пространственно-интеллектуального видео на основе пользовательского ввода в качестве основного управляющего сигнала.
Точное управление: модель действий (action model) с более точным управлением, поддерживающая управление точкой обзора и действиями пользователя с помощью клавиатуры и мыши.
Плавный опыт: оптимизация управления с помощью механизма скользящего окна, снижение задержки ввода и повышение плавности взаимодействия.
Обработка различных типов ввода: включает модуль дискретного управления движением, модуль непрерывного управления точкой обзора и модуль отслеживания положения в 3D-сцене для обработки различных типов пользовательского ввода.
Сценарии применения Matrix-Zero
Разработка 3D-игр: предоставление управляемого и быстрого моделирования 3D-сцен, повышение эффективности разработки игр.
Кинопроизводство: поддержка генерации сцен и кадров для фильмов/короткометражных сериалов, расширение творческих возможностей.
Воплощённый интеллект (Embodied Intelligence): быстрое создание симуляционных сцен, повышение эффективности обучения и применения воплощённого интеллекта.
Виртуальные среды и интерактивные приложения: обеспечение эффекта погружения, расширение сценариев применения в виртуальных средах и интерактивных приложениях.
Мультипродуктовые AI-решения: расширение возможностей таких бизнес-направлений компании, как производство AI-игр, производство AI-короткометражных сериалов и монтаж, повышение производительности.
Пространственный интеллект — следующая веха в развитии ИИ. Что же такое пространственный интеллект? По мнению «крестной матери ИИ» Ли Фэйфэй, пространственный интеллект предполагает не только способность ИИ видеть мир, но и понимание трёхмерного мира, а также возможность взаимодействовать с ним, что в конечном итоге обеспечивает глубокое взаимодействие с реальным миром.
Ожидается, что Matrix-Zero будет запущен в апреле 2025 года и в первую очередь будет применяться в таких бизнес-направлениях Kunlun Wanwei, как производство AI-игр и создание AI-короткометражных сериалов.
