MimicBrush : édition et remplacement局部自动 des zones sélectionnées d'une image cible 197

MimicBrush, un puissant outil d'édition d'images proposé conjointement par l'Université de Hong Kong et Alibaba, permet d'éditer ou de remplacer automatiquement une zone sélectionnée d'une image cible. L'utilisateur n'a qu'à indiquer la zone à modifier et à fournir une image de référence : MimicBrush capture intelligemment le lien entre les deux, et l'image cible peut alors être transformée pour ressembler à l'image de référence. Autrement dit, vous téléversez une image, vous sélectionnez une partie de celle-ci (les vêtements d'une personne, ses cheveux, l'arrière-plan, etc.), puis vous téléversez une image de référence qui vous plaît. MimicBrush éditera automatiquement la partie sélectionnée de votre image en fonction de l'image de référence, pour qu'elle ressemble à celle-ci. Vous pouvez ainsi ne modifier qu'une partie spécifique de l'image plutôt que l'image entière. De plus, MimicBrush extrait intelligemment les textures de l'image de référence (motif léopard, motifs floraux, veinures du bois, etc.) pour les appliquer à l'image cible.

Fonctionnalités et caractéristiques de MimicBrush :

• Imitation par image de référence : l'utilisateur peut délimiter une zone spécifique à éditer sur l'image cible, puis fournir une image de référence contenant le style ou l'objet souhaité. MimicBrush est capable d'analyser et d'imiter les caractéristiques visuelles spécifiques de l'image de référence et de les appliquer de manière transparente à la zone désignée de l'image source, garantissant ainsi la cohérence du style ou du contenu.

• Édition d'images zero-shot : les utilisateurs peuvent réaliser des transferts de style d'image sans fournir de nombreux échantillons ni effectuer de formation complexe.

• Apprentissage auto-supervisé : MimicBrush exploite des techniques d'apprentissage auto-supervisé pour renforcer l'alignement sémantique, permettant au modèle de capturer de manière auto-supervisée les correspondances sémantiques entre différentes images.

• Reproduction de style local : MimicBrush peut fusionner une partie d'une image sur une autre image, permettant ainsi une reproduction de style localisée.

Utilisation de MimicBrush :

Les utilisateurs peuvent utiliser MimicBrush sur le web en quelques étapes simples : téléversez d'abord l'image cible, dessinez ou téléversez un masque de la zone à éditer, puis téléversez l'image de référence, et il suffit d'un clic pour lancer l'édition.

MimicBrush convient aux scénarios de présentation de produits e-commerce, d'édition d'images et de transfert de contenu.

Adresse du projet : https://xavierchen34.github.io/MimicBrush-Page/

Github :https://github.com/ali-vilab/MimicBrush

HuggingFace : https://huggingface.co/spaces/xichenhku/MimicBrush