SeedEdit : outil d'édition d'images IA lancé par ByteDance 161

SeedEdit est un modèle d'édition d'images IA innovant lancé le 11 novembre 2024 par l'équipe du grand modèle Doubao de ByteDance. Le point fort de ce modèle réside dans le fait qu'une seule phrase suffit pour réaliser automatiquement la retouche photo : vous pouvez effectuer des modifications, changer de tenue, embellir, convertir des styles, ainsi qu'ajouter ou supprimer des éléments dans des zones spécifiques de l'image. Aucune compétence professionnelle en traitement d'image n'est requise, aucune autre opération n'est nécessaire, et il n'est plus besoin de manipulations complexes comme celles de Photoshop pour apporter toutes sortes de modifications et d'éditions complexes aux images. Que ce soit pour modifier le contenu ou le style d'une image, ou pour ajuster l'éclairage et l'angle, SeedEdit peut le faire tout en maintenant un résultat d'édition de haute qualité.

SeedEdit prend également en charge la saisie en langage naturel en chinois et en anglais, et peut même comprendre les expressions idiomatiques et les noms propres, garantissant ainsi l'exécution précise des instructions d'édition.

Fonctionnalités et caractéristiques principales de SeedEdit :

• Contrôle en langage naturel : les utilisateurs peuvent décrire leurs besoins d'édition en langage naturel, comme dans une conversation, par exemple « remplacer la pastèque par du raisin », et le modèle est capable de répondre rapidement et d'accomplir la tâche d'édition.

• Modifications multi-tours : SeedEdit est non seulement capable de générer des images de haute qualité lors de la première édition, mais prend également en charge les modifications multi-tours. Après chaque tour d'optimisation, SeedEdit est capable de mieux comprendre des instructions d'édition plus fines, comme ajuster uniquement une couleur locale, modifier la direction de l'éclairage, ou ajouter de petits objets, sans apporter de modifications superflues aux autres zones.

• Compréhension précise : SeedEdit possède une grande capacité de compréhension, peut identifier et exécuter avec précision des instructions d'édition complexes, et maintient la cohérence entre le résultat de l'édition et l'intention de l'utilisateur.

• Préservation des détails : pendant le processus d'édition, SeedEdit est capable de conserver les détails originaux de l'image, maintenant une haute qualité même lors du traitement de parties fines comme les fissures du verre ou les mèches de cheveux.

• Avancée technologique : il adopte une architecture Diffusion, mais grâce à une approche innovante, il transforme un modèle de génération d'images en modèle d'édition, équilibrant ainsi la reconstruction et la génération d'images, et améliorant la contrôlabilité et la qualité de l'édition.

• Stratégie de génération de données : pour résoudre le problème du manque de paires de données dans les tâches d'édition d'images, le concept de weak editor basé sur le T2I (texte vers image) a été introduit, améliorant la cohérence entre les images avant et après.

• Polyvalence : SeedEdit, en tant qu'outil d'édition d'images polyvalent, convient à un large éventail de besoins d'édition, allant de la retouche quotidienne à la conception créative, offrant ainsi davantage de choix.

Traitement précis par SeedEdit de divers détails :

SeedEdit prend en charge plusieurs types d'édition, couvrant tous les besoins, des ajustements de détails minutieux aux remplacements de contenu à grande échelle, et est capable de gérer différentes portées de modification :

• Remplacement local : remplacer un élément de l'image, par exemple remplacer un lapin par un faon.

• Ajustement géométrique : ajuster la taille, la forme ou l'angle d'un objet dans l'image, par exemple faire tourner un personnage sur le côté ou modifier la position de la main.

• Modification de l'éclairage : ajuster la direction et l'intensité de la lumière, par exemple faire entrer la lumière depuis le côté gauche.

• Conversion de style : transformer l'image dans un style artistique différent, par exemple passer d'un style réaliste à un style cartoon.

• Modifications de petite ampleur : par exemple ajuster l'expression d'un personnage, changer une couleur, affiner la forme d'un objet.

• Remplacements à grande échelle : comme modifier l'arrière-plan d'une scène, ajouter de nouveaux objets, ou remplacer des éléments thématiques entiers.

Comparaison de SeedEdit avec DALLE3 et Midjourney :

• DALLE3 : correspond davantage aux exigences des invites textuelles, mais a tendance à introduire des modifications de contenu inattendues.

• Midjourney : excellentes performances sur le plan esthétique, mais précision légèrement inférieure concernant les instructions textuelles.

• SeedEdit : tout en préservant les détails de l'image originale, il atteint une grande précision d'instruction, et permet dans l'ensemble une édition plus précise du contenu de l'image, sans modifications non pertinentes excessives.

Les utilisateurs peuvent utiliser SeedEdit pour modifier facilement le contenu d'une image, par exemple changer la couleur des vêtements d'un personnage, transformer le style d'une image en aquarelle ou en anime, ou supprimer des objets spécifiques de l'arrière-plan.

Actuellement, SeedEdit est en phase de test sur la version PC de Doubao et sur la version web de Jimeng AI. Les utilisateurs peuvent accéder à l'édition d'image efficace grâce à de simples instructions via les liens d'essai ci-dessous.

Adresse d'essai SeedEdit sur Doubao :

https://www.doubao.com/chat/create-image

Adresse d'essai SeedEdit sur Jimeng :

https://jimeng.jianying.com/ai-tool/image/generate