ByteDance libera InfiniteYou: un framework de generación de imágenes basado en FLUX que mantiene la consistencia de identidad 134

小编 · 2025-03-23

InfiniteYou es un potente framework de generación de imágenes presentado por ByteDance, basado en FLUX, que genera diversas imágenes manteniendo la consistencia de identidad. Aprovechando técnicas de transformadores de difusión (DiTs) como FLUX, aborda problemas de los métodos existentes, como la similitud de identidad insuficiente, la mala alineación entre texto e imagen y la baja calidad de generación.

ByteDance libera InfiniteYou: un framework de generación de imágenes basado en FLUX que mantiene la consistencia de identidad

¿Qué es InfiniteYou?

InfiniteYou es un potente marco de generación de imágenes lanzado por ByteDance, basado en FLUX, capaz de generar diversas imágenes manteniendo la consistencia de los personajes. Mediante la tecnología de transformadores de difusión (DiTs), como FLUX, resuelve problemas presentes en los métodos existentes, tales como la insuficiente similitud de identidad, la baja alineación entre texto e imagen y la baja calidad de generación.

字节开源InfiniteYou：一种基于FLUX，能够生成各种图像的同时并保持人物一致性.jpg

Funciones principales de InfiniteYou

Preservación de identidad: a través del componente InfuseNet, las características de identidad se inyectan en el modelo de difusión, asegurando que la identidad de los personajes en las imágenes generadas sea altamente consistente con la imagen de referencia de entrada.
Generación de imágenes de alta calidad: adopta una estrategia de entrenamiento en múltiples etapas, que incluye el preentrenamiento y el ajuste fino supervisado (SFT) con datos sintéticos de una sola persona y múltiples muestras (SPMS), mejorando significativamente la calidad de imagen y el efecto estético.
Flexibilidad basada en texto: los usuarios pueden personalizar el contenido de las imágenes generadas mediante descripciones en lenguaje natural, admitiendo descripciones de múltiples escenas, estilos y detalles.
Diseño plug-and-play: InfiniteYou es compatible con múltiples herramientas de ia y marcos existentes, como las distintas variantes de FLUX, ControlNets y LoRAs, lo que facilita la extensión y personalización por parte de los desarrolladores.

Tecnología principal de InfiniteYou

InfuseNet: es un componente innovador que inyecta las características de identidad de una persona en el modelo de generación de imágenes mediante conexiones residuales, asegurando que las imágenes generadas no solo se ajusten a la descripción, sino que también conserven rasgos faciales únicos.
Estrategia de entrenamiento en múltiples etapas: el modelo se preentrena primero con una gran cantidad de datos reales y, a continuación, se ajusta finamente con datos sintéticos de una sola persona y múltiples muestras, con el fin de optimizar el efecto de generación y mejorar la alineación entre texto e imagen.

字节开源InfiniteYou：一种基于FLUX，能够生成各种图像的同时并保持人物一致性.webp

Escenarios de aplicación de InfiniteYou

Creación de personajes virtuales: ayuda a los usuarios a generar rápidamente personajes virtuales personalizados para escenarios como redes sociales virtuales, juegos o reuniones virtuales.
Avatares personalizados y redes sociales: los usuarios pueden utilizar InfiniteYou para generar avatares personalizados en diversos estilos, mejorando la experiencia personalizada en redes sociales.
Publicidad y marketing: los anunciantes pueden utilizar InfiniteYou para generar imágenes publicitarias similares a su público objetivo, aumentando el atractivo y la tasa de conversión de los anuncios.
Desarrollo de videojuegos: ayuda a los desarrolladores a generar rápidamente modelos de personajes diversificados, mejorando la inmersión y la diversión del juego.
Creación artística: los artistas pueden utilizar InfiniteYou para explorar diferentes estilos artísticos e inspiración creativa, creando obras únicas.

Cómo usar InfiniteYou

1. Preparación del entorno

Requisitos de hardware: se recomienda utilizar una GPU de alto rendimiento, como NVIDIA RTX serie 30 o superior.
Entorno de software: es necesario instalar Python (se recomienda la versión 3.8 o superior) y el framework PyTorch.

2. Pasos de instalación

Clonar el repositorio de código:

git clone https://github.com/bytedance/InfiniteYou.git
cd InfiniteYou

Instalar dependencias:

pip install -r requirements.txt

3. Generación de imágenes

Ejecutar el script de generación:

python generate.py --prompt "描述文本" --image_path "输入图片路径" --output_path "输出图片路径"

Donde:

prompt: descripción de texto de entrada, que se utiliza para definir el contenido de la imagen generada.
image_path: ruta de la imagen de referencia de entrada, utilizada para extraer las características de identidad.
output_path: ruta donde se guarda la imagen generada.

Ejemplo: supongamos que tienes una foto tuya y quieres generar una imagen de ti mismo de vacaciones en la playa:

python generate.py --prompt "一个人在海边度假，穿着休闲装，阳光明媚" --image_path "./input.jpg" --output_path "./output.jpg"

Tras la ejecución, InfiniteYou generará una imagen que cumpla con los requisitos según tu descripción y la foto de entrada.

Los resultados muestran que InfiniteYou supera a algunas de las tecnologías convencionales existentes en cuanto a fidelidad de identidad, coincidencia de texto y calidad de imagen, como PuLID-FLUX y FLUX.1-dev IP-Adapter.