DemoFusion: herramienta de IA de código abierto y gratis para repintar imágenes 108

DemoFusion, una herramienta de código abierto de ai para la mejora y redibujado de imágenes, es una herramienta de generación y mejora de imágenes de súper alta resolución que, mediante la última tecnología BSR GAN, puede aumentar la resolución de las imágenes generadas 4 veces, 16 veces o incluso más, además de reparar y mejorar los detalles de la imagen.

Dirección del proyecto Demofusion: https://github.com/PRIS-CV/DemoFusion

Dirección de prueba de Demofusion: https://huggingface.co/spaces/radames/Enhance-This-DemoFusion-SDXL

DemoFusion fue creado por el Instituto de Inteligencia Artificial de la Universidad de Surrey y permite a los usuarios generar imágenes básicas con modelos de inteligencia artificial de código abierto disponibles de forma gratuita (como Stable Diffusion) y luego mejorarlas, agregando más detalles y funciones a una resolución mayor. Cualquier PC gaming de gama media o Mac M1 ofrece la capacidad de cálculo necesaria.

Para obtener resultados de alta resolución con herramientas comunes de IA de código abierto, el equipo primero generó imágenes de baja resolución y luego las mejoró. Este no es un método de ampliación convencional, sino que procesa la imagen en forma de parches para aumentar los detalles y la resolución al menos 16 veces, extrayendo más detalles del modelo de IA.

Características y funciones de DemoFusion:

Nuestro marco DemoFusion amplía sin problemas los modelos GenAI de código abierto, adoptando un muestreo progresivo ascendente, residuos saltados y un mecanismo de muestreo expandido para lograr la generación de imágenes de mayor resolución.

1. Generación de imágenes de alta resolución: DemoFusion se centra en aprovechar los modelos de difusión latente (LDM) para generar imágenes de mayor resolución, superando las limitaciones de las técnicas tradicionales de generación de imágenes.

2. Muestreo progresivo ascendente: El marco genera imágenes más nítidas y detalladas al aumentar gradualmente la resolución de la imagen. Este método progresivo permite un control más fino de la calidad de la imagen. Aumentará progresivamente la claridad de la imagen, de modo que primero puedas ver un efecto aproximado y luego se vuelva más nítido poco a poco.

3. Mecanismo de residuos saltados y muestreo expandido: DemoFusion utiliza estas técnicas avanzadas para mejorar los detalles locales y la coherencia global de la imagen, generando así imágenes más naturales y realistas.

4. Integración con ControlNet: Se puede integrar sin problemas en múltiples aplicaciones basadas en LDM, por ejemplo, combinado con ControlNet, para lograr una generación de imágenes de alta resolución controlable.

5. Ampliación de imágenes reales: También es capaz de ampliar imágenes reales, reemplazando la salida de la fase inicial mediante la representación codificada de la imagen real, para lograr una ampliación de alta resolución de la imagen.

6. Sin necesidad de grandes recursos de memoria ni ajustes: DemoFusion está diseñado para ser eficiente y fácil de usar, sin requerir grandes recursos de memoria ni procesos de ajuste complejos.

Aún está por ver si DemoFusion logrará suficiente tracción para competir con gigantes como DALL-E de OpenAI, pero su creación es un paso importante para abrir el potencial de la generación de imágenes mediante IA al público y a la comunidad tecnológica en general. No requiere entrenamiento adicional, se puede aplicar directamente a los modelos existentes y ofrece una mejora significativa de la resolución.