HiDiffusion: значительное повышение скорости генерации изображений в диффузионных моделях 129

HiDiffusion значительно улучшает качество генерации изображений в диффузионных моделях, увеличивая скорость в 6 раз. Разработано исследовательской командой ByteDance, HiDiffusionне требует обучения и способен повысить чёткость и скорость генерации изображений в SD с помощью всего одной строки кода. Поддерживается увеличение разрешения генерируемых изображений до 4096×4096 при одновременном повышении скорости генерации в 1,5–6 раз. Кроме того, при генерации изображений в высоком разрешении время вывода сокращается на 40–60%, поддерживаются все модели SD, а также их дочерние модели, например Playground.

Функциональные возможности HiDiffusion:

• Поддерживаемые модели: HiDiffusion поддерживает множество моделей стабильной диффузии, включая Stable Diffusion XL, Stable Diffusion XL Turbo, Stable Diffusion v2 и Stable Diffusion v1. Кроме того, он поддерживает дочерние диффузионные модели на их основе, такие как Ghibli-Diffusion и Playground.

• Поддерживаемые задачи: HiDiffusion поддерживает различные задачи, включая генерацию изображений по тексту, задачи сети управления ControlNet и восстановление изображений Inpainting.

• Простота использования: благодаря библиотеке Huggface Diffusers использовать HiDiffusion для генерации изображений очень просто — достаточно добавить всего одну строку кода.

• Широкие экспериментальные проверки показали, что HiDiffusion не только решает проблемы дублирования объектов и высокой вычислительной нагрузки, но и достигает беспрецедентных результатов в задачах генерации изображений с высоким разрешением.

Тестовый адрес HiDiffusion:https://huggingface.co/spaces/multimodalart/HiDiffusion