PhotoMaker: создание портретных фотографий по описанию 126

PhotoMaker использует несколько фотографий в качестве идентификаторов личности, извлекает черты человека, а затем генерирует фотографию персонажа, соответствующую описанию, создавая новое, персонализированное изображение человека.

PhotoMaker также способен смешивать черты нескольких разных людей с разных фотографий, создавая совершенно новый образ. Кроме того, можно изменять пол, возраст персонажей на фото и генерировать их изображения в различных стилях. Быстро, реалистично и естественно.

Основные функции PhotoMaker:

• Создание фото по текстовому описанию: вы можете описать желаемый облик персонажа, и он сгенерирует фотографию, соответствующую этому описанию.

• Смешивание идентичности: если пользователь предоставляет различные изображения-ID в качестве входных данных, наш PhotoMaker способен эффективно объединять черты разных ID, формируя новый ID.

• Изменение возраста или пола: например, можно превратить фотографию мужчины в женский образ или сделать человека на фото моложе или старше.

• Стилизация: также возможно добавлять к фотографиям различные художественные эффекты, такие как стиль масляной живописи или мультипликационный стиль, при этом сохраняя свойства ID.

• Перенос персонажей из произведений искусства/старых фотографий в реальность: используя в качестве входных данных художественную картину, скульптуру или старую фотографию человека, наш PhotoMaker способен «сфотографировать» человека из прошлого века или даже из далёкой древности в нашем веке. Подсказки для conditioning мы показываем под каждым изображением.

Основные особенности PhotoMaker:

• Объединение черт с нескольких фотографий: PhotoMaker может взять несколько фотографий — как одного и того же человека, так и разных людей. Он анализирует черты на этих снимках, а затем объединяет их, создавая новое, персонализированное изображение человека.

• Гибкое текстовое управление: по сравнению с другими методами PhotoMaker обеспечивает более гибкое управление с помощью текста. Пользователи могут направлять генерацию изображения через текстовые подсказки, что позволяет получать не только реалистичные, но и максимально соответствующие конкретным требованиям изображения.

• Высокая эффективность и быстрая генерация: по сравнению с методами, требующими большого объёма дообучения (такими как DreamBooth), PhotoMaker обеспечивает более высокую скорость генерации при сохранении идентификационной информации. Он способен создавать персонализированные фотографии людей за короткое время (например, за 10 секунд), что очень удобно для сценариев, где требуется быстрое получение результата.

• Высокая точность сохранения идентичности: PhotoMaker лучше сохраняет идентификационные черты человека при генерации изображений. Это особенно важно для сценариев, где требуется точное сохранение черт человека (например, персонализированные портреты или идентификация личности).

Как работает PhotoMaker?

PhotoMaker сначала анализирует фотографии, распознавая черты человека на каждом снимке, такие как черты лица, причёску, стиль одежды и т. д. Затем он объединяет эти черты для создания нового изображения. По сути, это ваше лицо, но, возможно, с причёской и выражением лица кинозвезды, в одежде с той исторической фотографии.

Конечный результат — совершенно новая фотография, на которой изображён уникальный персонаж: похожий на вас, но обладающий чертами и стилем людей с других фотографий. В этом и заключается ключевая функция PhotoMaker — объединение черт с нескольких разных фотографий для создания совершенно нового, персонализированного изображения.

Исходный код: https://github.com/TencentARC/PhotoMaker