Помощник сценариста▸ 
AI Приложения 
AI Новости 
Unique3D: Создание качественных 3D-мешей по одному изображению
Unique3D: Создание качественных 3D-мешей по одному изображениюОписание
Unique3D генерирует высококачественные, разнообразные текстурированные меши из одиночных изображений дикой природы за 30 секунд, конечно, скорость работы зависит от ваших аппаратных ресурсов.
Основные функции Unique3D:
Высокая точность генерации: Unique3D обеспечивает самую современную точность генерации, создавая детализированные и сложные текстуры, а также сложную геометрию. Это достигается с помощью модели многовидовой диффузии, которая генерирует ортогональные многовидовые изображения и соответствующие карты нормалей.
Эффективность: фреймворк высокоэффективен и способен генерировать высококачественные 3D-меши за 30 секунд. Такая эффективность достигается благодаря интеграции быстрой прямой модели и алгоритма мгновенной реконструкции мешей под названием ISOMER.
Согласованность: Unique3D обеспечивает согласованность генерируемых видов благодаря использованию многоуровневого процесса масштабирования, который постепенно повышает разрешение сгенерированных изображений. Алгоритм ISOMER интегрирует цветовые и геометрические предшествующие данные в результаты меша, решая проблемы несогласованности, обнаруженные в предыдущих методах.
Универсальность: фреймворк демонстрирует высокую универсальность и хорошо работает с разнообразными 2D-изображениями дикой природы в различных стилях. Это подтверждается обширными экспериментами, которые показывают, что Unique3D превосходит существующие методы по точности, геометрическим деталям и разрешению.
Стратегия многоуровневого масштабирования: Unique3D использует стратегию многоуровневого масштабирования для постепенного повышения разрешения генерируемых изображений. Это включает тонкую настройку многовидового ControlNet и использование модели сверхразрешения для достижения высокого разрешения вывода.
Прогнозирование карт нормалей: для захвата богатых деталей поверхности Unique3D использует модель диффузии нормалей для прогнозирования карт нормалей, соответствующих многовидовым цветным изображениям. Это повышает точность геометрических деталей, особенно на краях.
Оптимизация ExplicitTarget: для решения проблемы многовидовой несогласованности и уточнения геометрических деталей Unique3D вводит оптимизацию ExplicitTarget. Этот метод назначает каждой вершине уникальную цель оптимизации, что более надёжно направляет оптимизацию по сравнению с традиционными методами.
Особенности Unique3D:
Генерация высококачественных текстурированных мешей за 30 секунд.
Обучение всего на 8 GPU RTX 4090 за 5 дней.
Использование модели многовидовой диффузии и модели диффузии нормалей для генерации многовидовых изображений и карт нормалей.
Применение многоуровневого процесса масштабирования для повышения разрешения.
Использование ISOMER для мгновенной и согласованной реконструкции мешей.
Unique3D разработан совместно исследовательскими группами Университета Цинхуа и AVAR Inc.
Официальный сайт Unique3D:
Unique3D онлайн: https://huggingface.co/spaces/Wuvin/Unique3D
Страница проекта Unique3D: https://wukailu.github.io/Unique3D/
Unique3D на Github: https://github.com/AiuniAI/Unique3D
