TryOnDiffusion_云技派,专注ai人工智能! 205

TryOnDiffusion — это архитектура диффузии на основе двух UNet, предназначенная для генерации визуализации одежды на входном человеке. Этот метод позволяет сохранять детали одежды, одновременно адаптируясь к значительным изменениям позы и формы тела. TryOnDiffusion демонстрирует самые современные результаты как качественно, так и количественно, и является очень эффективной технологией виртуальной примерки.

TryOnDiffusion может объединять два изображения, помогая заменить одежду человека на фотографии. Одно изображение показывает одного человека, а другое — одежду, которую носит другой человек, — генерируется изображение, показывающее, как эта одежда может выглядеть на входном человеке. Ранее такие модели обычно имели недостаток в виде потери деталей одежды. Традиционные методы синтеза обычно могли принимать только два изображения с небольшими различиями в позах, иначе на синтезированном новом изображении одежда сильно деформировалась. TryOnDiffusion использует архитектуру диффузии, называемую параллельным UNet, что позволяет синтезированному изображению адаптироваться к позе и форме тела человека при сохранении деталей одежды.

Особенности TryOnDiffusion:

• Эта модель использует технологию диффузии, чтобы показать, как одежда выглядит на людях с разным телосложением и позами.

• Новая модель ai способна генерировать высококачественные, реалистичные изображения виртуальной примерки.

• Эта модель использует диффузию изображений и механизмы перекрёстного внимания, а не текстовый ввод.

• Для повышения точности модель обучена на данных Google Shopping Graph.

• Функция виртуальной примерочной теперь поддерживает женскую одежду таких брендов, как Anthropologie, LOFT, H&M и Everlane.

• Эта функция будет постепенно расширяться на большее количество брендов.

• В настоящее время код не находится в открытом доступе.