5 открытых 3D-моделей от Hunyuan3D-2 от Tencent: особенности каждой 204

Что такое Hunyuan3D-2?

Hunyuan3D 2 — это передовая крупномасштабная система генерации 3D-активов, разработанная компанией Tencent, способная создавать высокодетализированные текстурированные 3D-модели из текста или изображений.

Ключевые возможности Hunyuan3D-2

• Двухэтапный процесс генерации: используется двухэтапный подход, при котором сначала создаётся геометрическая модель, а затем для неё синтезируются текстурные карты. Такой подход эффективно разделяет задачи генерации формы и текстуры, одновременно обеспечивая гибкость для текстурирования как сгенерированных, так и созданных вручную геометрических моделей.

• Высокое качество генерации: способен создавать реалистичные 3D-модели с высоким качеством текстур и геометрических деталей, превосходя существующие модели с открытым и закрытым исходным кодом.

• Разнообразный вывод: может генерировать 3D-активы различных типов, включая объекты, персонажей, окружения и многое другое.

• Быстрая генерация: оптимизированная производительность позволяет быстро создавать модели, повышая эффективность работы.

Особенности моделей Hunyuan3D-2 с открытым исходным кодом

Основные модели

Hunyuan3D-DiT-v2-0

• Высокодетализированная генерация геометрии: основанная на потоковой диффузии диффузионная модель, способная генерировать высокодетализированные и высокодетализированные нетекстурированные геометрические модели по заданному изображению-подсказке.

• Точное соответствие: сгенерированные геометрические модели точно соответствуют входному изображению, закладывая прочную основу для дальнейшего применения.

• Гибридная сетевая архитектура: использует гибридную архитектуру сети с двухпоточной и однопоточной структурами, что повышает качество генерации.

• Количество параметров: 2,6 миллиарда параметров.

Hunyuan3D-Paint-v2-0

• Высокодетализированный синтез текстур: способен генерировать высокодетализированные и живые реалистичные текстурные карты для сгенерированных геометрических моделей или созданных вручную сеток.

• Технология многоракурсной диффузии: объединяет геометрические условия (такие как карты нормалей и карты позиций) для генерации многоракурсных изображений, которые затем запекаются в высокодетализированные текстуры.

• Количество параметров: 1,3 миллиарда параметров.

Hunyuan3D-Delight-v2-0

• Удаление освещения с изображений: преобразует входное изображение в состояние без теней и освещения, генерируя текстурные карты, инвариантные к освещению.

• Повышение качества текстур: за счёт удаления светотеневых эффектов позволяет создавать более качественные текстуры, что подходит для предварительной обработки при генерации текстур.

• Количество параметров: 1,3 миллиарда параметров.

Расширенные модели

Hunyuan3D-DiT-v2-0-Fast

• Ускоренная версия: благодаря технологии дистилляции управляющих сигналов время вывода сокращается вдвое, что подходит для сценариев с повышенными требованиями к скорости генерации.

• Эффективная генерация: при сохранении качества генерации значительно повышает скорость.

Hunyuan3D-2mv

• Генерация формы по нескольким ракурсам: специализируется на генерации высококачественных 3D-геометрических форм на основе входных данных с нескольких ракурсов.

• Подходит для сложных сцен: идеально подходит для 3D-творчества, требующего понимания сцен или объектов с разных углов.

Hunyuan3D-2mini

• Облегчённая версия: при сохранении ключевых функций оптимизированы размер модели и вычислительная эффективность.

• Подходит для облегчённых приложений: лучше подходит для сценариев с ограниченными ресурсами, таких как мобильные или облегчённые устройства.

Применение Hunyuan3D-2

• Разработка игр: позволяет быстро создавать высококачественные 3D-игровые активы, такие как персонажи, предметы и окружения.

• Пользовательский контент и социальные сети (UGC): поддерживает создание контента пользователями, позволяя быстро генерировать персонализированные 3D-модели по текстовым описаниям, изображениям или эскизам.

• Электронная коммерция и реклама: позволяет быстро создавать высокоточные 3D-модели товаров на основе изображений продуктов для онлайн-демонстрации и интерактивного взаимодействия.

• Промышленное производство и дизайн: позволяет быстро создавать 3D-прототипы промышленных изделий на основе эскизов или концепт-артов, поддерживает множество форматов и легко интегрируется с инструментами 3D-печати.

• Образование и научные исследования: предоставляет модели и код с открытым исходным кодом, удобные для преподавателей и исследователей в учебных и научных целях.

Код для вывода, контрольные точки моделей и технический отчёт Hunyuan3D-2 опубликованы в открытом доступе.

Официальный сайт проекта: https://3d-models.hunyuan.tencent.com

Репозиторий на Github: https://github.com/Tencent/Hunyuan3D-2

Коллекция моделей на HuggingFace: https://huggingface.co/tencent/Hunyuan3D-2