SeedEdit: herramienta de edición de imágenes con IA lanzada por ByteDance 168

SeedEdit es un modelo innovador de edición de imágenesai lanzado por el equipo del modelo grande Doubao deByteDance el 11 de noviembre de 2024. Lo más destacado de este modelo es que con solo una frase se puede lograr la edición automática de imágenes, permitiéndote retocar fotos, cambiar ropa, embellecer, transferir estilos, así como añadir o eliminar elementos en áreas específicas de la imagen. No se requieren habilidades profesionales de procesamiento de imágenes, ni ninguna otra operación; sin necesidad de complicadas operaciones como las de Photoshop, puedes realizar diversas modificaciones y ediciones complejas en las imágenes. Ya sea para cambiar el contenido o el estilo de la imagen, o ajustar la iluminación y el ángulo, SeedEdit puede lograrlo manteniendo resultados de edición de alta calidad.

SeedEdit también admite la entrada en lenguaje natural en chino e inglés, e incluso puede entender modismos y nombres propios, garantizando la ejecución precisa de las instrucciones de edición.

Funciones y características principales de SeedEdit:

• Control mediante lenguaje natural: los usuarios pueden describir sus necesidades de edición en lenguaje natural, como si estuvieran conversando con una persona, por ejemplo, "cambia la sandía por uvas", y el modelo podrá responder rápidamente y completar la tarea de edición.

• Edición en varias rondas: SeedEdit no solo es capaz de generar imágenes de alta calidad en la primera edición, sino que también admite ediciones en varias rondas. Después de cada ronda de optimización, SeedEdit puede comprender mejor instrucciones de edición más sutiles, como ajustar únicamente el color de una zona local, cambiar la dirección de la iluminación o añadir pequeños objetos, sin realizar modificaciones innecesarias en otras áreas.

• Comprensión precisa: SeedEdit cuenta con una gran capacidad de comprensión, pudiendo identificar y ejecutar con precisión instrucciones de edición complejas, manteniendo la coherencia entre los resultados editados y la intención del usuario.

• Preservación de detalles: durante el proceso de edición, SeedEdit es capaz de mantener los detalles originales de la imagen, manteniendo una alta calidad incluso al tratar con elementos finos como grietas en vidrios o mechones de cabello.

• Avance técnico: adopta la arquitectura Diffusion, pero mediante métodos创新的 convierte el modelo de generación de imágenes en un modelo de edición, equilibrando la reconstrucción y la generación de imágenes, y mejorando la controlabilidad y la calidad de la edición.

• Estrategia de generación de datos: para resolver la falta de pares de datos en las tareas de edición de imágenes, se introduce el concepto de weak editor basado en T2I (texto a imagen), mejorando la coherencia entre las imágenes antes y después.

• Versatilidad: SeedEdit, como unaherramienta versátil de edición de imágenes, es adecuada para una amplia gama de necesidades de edición, desde el retoque diario hasta el diseño creativo, ofreciendo más opciones.

SeedEdit maneja con precisión diversas modificaciones de detalles:

SeedEdit admite varios tipos de edición, cubriendo necesidades desde ajustes mínimos de detalles hasta reemplazos de contenido a gran escala, y puede manejar diferentes rangos de modificación:

• Reemplazo local: reemplazar un elemento específico de la imagen, por ejemplo, cambiar el conejo de la imagen por un cervatillo.

• Ajuste geométrico: ajustar el tamaño, la forma o el ángulo de los objetos en la imagen, por ejemplo, hacer que una persona gire hacia un lado o cambiar la posición de la mano.

• Cambios de iluminación: ajustar la dirección y la intensidad de la luz, por ejemplo, hacer que la luz entre desde el lado izquierdo.

• Transferencia de estilo: transformar la imagen en un estilo artístico diferente, por ejemplo, convertir un estilo realista en estilo caricatura.

• Modificaciones de pequeña escala: por ejemplo, ajustar la expresión facial de una persona, cambiar colores o afinar la forma de los objetos.

• Reemplazos a gran escala: como modificar el fondo de la escena, añadir nuevos objetos o reemplazar elementos temáticos completos.

Comparación de SeedEdit con DALL·E 3 y Midjourney:

• DALL·E 3: se ajusta mejor a los requisitos de las instrucciones de texto, pero tiende a introducir cambios de contenido no deseados.

• Midjourney: destaca en el aspecto estético, pero su precisión ante las instrucciones de texto es ligeramente inferior.

• SeedEdit: logra una alta precisión en las instrucciones mientras preserva los detalles originales de la imagen, pudiendo editar el contenido de la imagen de manera más precisa en general y sin generar excesivas modificaciones irrelevantes.

Los usuarios pueden aprovechar SeedEdit para modificar fácilmente el contenido de las imágenes, como cambiar el color de la ropa de una persona, transformar el estilo de la imagen a acuarela o anime, eliminar objetos específicos del fondo, entre otros.

Actualmente, SeedEdit ya se encuentra en fase de pruebas en la versión de PC de Doubao y en la versión web de Jimeng AI, y los usuarios pueden realizar ediciones de imágenes eficientes mediante instrucciones sencillas a través de las direcciones de prueba que se indican a continuación.

Dirección de prueba de SeedEdit en Doubao:

https://www.doubao.com/chat/create-image

Dirección de prueba de SeedEdit en Jimeng:

https://jimeng.jianying.com/ai-tool/image/generate