Qwen-Image-Edit : modèle d'édition d'images Tongyi pour modifications sémantiques et d'apparence 202

Qwen-Image-Edit est un modèle d'édition d'images lancé par Tongyi Qianwen (Qwen). Il a été entraîné à partir du modèle Qwen-Image de 20B de paramètres et est capable de gérer simultanément les modifications sémantiques et d'apparence dans les images, comme par exemple modifier précisément le texte sur une image, créer des personnages IP, changer de style, etc. Il a obtenu les meilleures performances sur plusieurs benchmarks publics et est déjà open source sur ModelScope, Hugging Face et GitHub.

Capacités principales de Qwen-Image-Edit

• Édition sémantique et d'apparence : envoyer l'image à Qwen2.5-VL permet de contrôler la signification de l'image, tandis que l'envoyer au VAE Encoder permet de contrôler son apparence. Grâce à cette capacité, il est possible de créer des personnages IP, faire pivoter des objets, changer le style d'une image, ainsi qu'ajouter, supprimer ou redessiner des éléments.

• Modification de texte très précise : il est possible de modifier du texte en chinois comme en anglais, et sans changer la police, la taille ou le style d'origine, on peut ajouter, supprimer ou modifier le contenu du texte dans l'image, ainsi que changer la couleur de certains textes spécifiques.

• Excellentes performances en benchmarks : il a atteint les meilleurs résultats actuels sur plusieurs benchmarks publics.

Technologie de Qwen-Image-Edit

• Tout d'abord, un entraînement multi-tâches. Une méthode d'entraînement multi-tâches améliorée a été utilisée, combinant les tâches traditionnelles de génération de texte à image, de texte plus image pour générer une nouvelle image, et d'image pour générer une nouvelle image, afin de mieux faire correspondre les informations cachées entre les deux parties Qwen2.5-VL et MMDiT.

• Ensuite, un double encodage. L'image est envoyée respectivement à Qwen2.5-VL (pour contrôler la signification de l'image) et au VAE Encoder (pour contrôler l'apparence de l'image), de sorte que lorsqu'il modifie l'image, le modèle peut à la fois comprendre le sens de la modification souhaitée et garantir que l'image reste visuellement proche de l'original.

Cas d'utilisation de Qwen-Image-Edit

• Création de personnages IP : possibilité de créer différents contenus à partir d'un même personnage, par exemple transformer la mascotte de Qwen, le capybara, en stickers MBTI.

• Changement de point de vue : possibilité de faire pivoter un objet de 90 ou 180 degrés.

• Transfert de style : possibilité de convertir un portrait dans le style d'un dessin animé du Studio Ghibli.

Comment faire un transfert de style avec Qwen-Image-Edit

1. Allez d'abord sur Qwen Chat (chat.qwen.ai) et cliquez sur la fonctionnalité « Édition d'image ».

2. Téléchargez ensuite l'image dont vous souhaitez modifier le style dans l'interface d'édition.

3. Indiquez ensuite clairement dans le prompt le style souhaité, par exemple « Convertis ce portrait dans le style Ghibli ».

4. Cliquez ensuite sur soumettre, et le modèle commencera le traitement.

5. Une fois le traitement terminé, vous pourrez voir l'image modifiée et la télécharger.

Liens de téléchargement du modèle Qwen-Image-Edit :

• ModelScope : https://modelscope.cn/models/Qwen/Qwen-Image-Edit

• Hugging Face : https://huggingface.co/Qwen/Qwen-Image-Edit

• GitHub : https://github.com/QwenLM/Qwen-Image