Meta представила AssetGen 2.0 — новую 3D-базовую модель 93

小编 ·

Meta представила AssetGen 2.0 — новую 3D-базовую модель

AssetGen 2.0 от Meta — новый инструмент генерации 3D-моделей, позволяющий быстро создавать детализированные и реалистичные 3D-модели и текстуры по текстовому или графическому запросу. Благодаря технологии одноэтапной 3D-диффузии процесс генерации упрощается, а согласованность формы и текстур улучшается. Meta стремится сделать создание 3D-контента таким же простым, как и 2D, чтобы любой пользователь мог строить виртуальные миры. Кроме того, компания работает над новой функцией, которая позволит генерировать целые 3D-сцены за один проход.

Meta представила AssetGen 2.0 — новую 3D-базовую модель

Что такое AssetGen 2.0?

AssetGen 2.0, выпущенный Meta, — это новый 3D-инструмент для генерации моделей. Он позволяет быстро создавать детализированные и реалистичные 3D-модели и текстуры с помощью текстовых или графических подсказок. AssetGen 2.0 использует одноэтапную 3D-диффузию, что упрощает процесс генерации и обеспечивает лучшую согласованность форм и текстур моделей. С помощью этого инструмента Meta стремится сделать создание 3D-контента таким же простым, как создание 2D-контента, чтобы облегчить всем построение виртуальных миров. Кроме того, Meta разрабатывает новую функцию, которая в будущем позволит генерировать целые 3D-сцены за один раз, что сделает создание 3D-контента ещё более доступным.

Meta推出新一代3D基础模型:AssetGen 2.0.webp

Функции AssetGen 2.0

AssetGen 2.0 — это генеративная модель, специально разработанная для преобразования текстовых и графических подсказок в высококачественные 3D-ассеты. Она состоит из двух внутренних субмоделей Meta: одна используется для генерации 3D-мешей (meshes), а другая — для генерации текстур (textures).

Техническая архитектура

  • Одноэтапная 3D-диффузионная модель: в отличие от AssetGen 1.0, AssetGen 2.0 использует одноэтапную 3D-диффузионную модель, которая генерирует 3D-меши напрямую из текстовых подсказок, а не создаёт сначала 2D-виды с последующей их обработкой. Эта архитектура позволяет создавать 3D-ассеты с геометрической согласованностью и тонкими деталями.

  • Улучшенная генерация текстур: AssetGen 2.0 включает обновлённую модель TextureGen для генерации высококачественных текстур. Новая модель улучшена с точки зрения согласованности видов, исправления текстур и разрешения текстур.

Сценарии применения

  • Создание 3D-миров: в настоящее время Meta использует AssetGen 2.0 внутри компании для создания 3D-виртуальных миров и планирует распространить его на авторов Horizon и редактор Meta Horizon Desktop позднее в этом году.

  • Генерация целых 3D-сцен: Meta также планирует в ближайшие несколько месяцев запустить функцию генерации целых 3D-сцен на базе AssetGen 2.0, которая позволит авторам быстро создавать сложные виртуальные среды с помощью простых текстовых или графических подсказок.

Какие улучшения AssetGen 2.0 получил по сравнению с AssetGen 1.0?

Унаследовав основу AssetGen 1.0, AssetGen 2.0 совершил значительный прорыв в исследованиях генеративного ИИ для 3D. В нём используется одноэтапная 3D-диффузионная модель (single-stage 3D diffusion model), которая значительно повышает детализацию и реалистичность 3D-мешей, а сопутствующая модель TextureGen гарантирует, что ассеты не только визуально привлекательны, но и обладают высококачественными текстурами, отвечающими требованиям производственной среды. Модель обеспечивает согласованность геометрической структуры при чрезвычайно тонкой детализации. В отличие от AssetGen 1.0, она использует 3D-диффузионный механизм для геометрического моделирования и обучена на крупномасштабном корпусе 3D-ассетов, а в части генерации текстур внедрены такие новые технологии, как усиление согласованности видов, исправление текстур и генерация текстур более высокого разрешения.

Кроме того, 3D-ассеты, сгенерированные AssetGen 2.0, демонстрируют более заметное улучшение детализации и достоверности по сравнению с AssetGen 1.0 и позволяют создавать ассеты с тонкими геометрическими деталями.

Подробности:https://developers.meta.com/horizon/blog/AssetGen2