Stability AI выпустила новую модель генерации изображений Stable Cascade 199

Ведущая компания в области генерации изображений по тексту Stability AI недавно выпустила новую модель под названием Stable Cascade — это модель генерации изображений по тексту, основанная на архитектуре Würstchen. Помимо предоставления контрольных точек и скриптов для инференса, Stability AI также опубликовала скрипты для дообучения, ControlNet и обучения LoRA, что позволяет пользователям дополнительно экспериментировать с этой новой архитектурой, доступной на странице Stability в GitHub.

Stability AI обещает, что Stable Cascade будет быстрее и мощнее, чем её ведущая в отрасли предшественница Stable Diffusion, которая лежит в основе многих других инструментов генерации изображений по тексту.

Что такое Stable Cascade?

Stable Cascade — это модель генерации изображений по тексту, способная создавать реалистичные и разнообразные изображения на основе подсказок на естественном языке.

Stable Cascade может генерировать фотографии и выполнять различные задачи редактирования изображений, а также повышать разрешение существующих изображений.Например, повышать разрешение существующих изображений, изменять определённые части изображения или создавать новые изображения на основе краёв другого изображения.

Помимо стандартной генерации изображений по тексту, Stable Cascade также может выполнять вариации изображений и генерацию изображений из изображения.

Функции Controlnet, выпущенные вместе с моделью:

Локальная перерисовка: ввод изображения в сочетании с маской, прилагаемой к текстовой подсказке. Модель заполняет замаскированную часть изображения в соответствии с предоставленной текстовой подсказкой.

Canny Edge: генерация нового изображения путём отслеживания краёв существующего изображения, передаваемого модели. Этот тест также можно расширить из эскиза.

2-кратное сверхразрешение: также может использоваться для латентного пространства, сгенерированного на этапе C.

Где я могу найти Stable Cascade и что я могу с ней делать?

В настоящее время Stable Cascade доступна на GitHub только для исследовательских целей и не предназначена для коммерческого использования.

Репозиторий исходного кода Stable Cascade на GitHub:https://github.com/Stability-AI/StableCascade

Stability AI предоставляет блокнот Colab, демонстрирующий использование Stable Cascade для различных задач генерации и редактирования изображений. Вы также можете ознакомиться с примерами изображений, сгенерированных Stable Cascade, на их веб-сайте.

Stable Cascade — это универсальная модель, которая может использоваться для различных приложений, таких как создание контента, дизайн, образование, развлечения и многое другое. Например, вы можете использовать Stable Cascade для генерации вымышленных персонажей, пейзажей, животных, логотипов или любых других изображений, которые можно описать текстом.

Вы также можете использовать «Stable Cascade» для улучшения или изменения существующих изображений, например, для повышения их разрешения, изменения стиля, добавления или удаления объектов или создания новых изображений на основе их краёв.