ICEdit | Édition d'images AI rapide avec Nunchaku

1. Qu'est-ce que le workflow ComfyUI ICEdit ?

Le workflow ComfyUI ICEdit-Nunchaku intègre le cadre innovant In-Context Edit (ICEdit) avec l'optimisation Nunchaku pour une édition d'images ultra-rapide. Développé par des chercheurs de l'Université de Zhejiang et de l'Université de Harvard, ICEdit permet une édition d'images instructive de haute qualité avec une efficacité remarquable. Basé sur le transformateur de diffusion FLUX et exploitant les principes d'apprentissage en contexte d'ICEdit, ce workflow préserve les caractéristiques d'identité tout en permettant des modifications flexibles basées sur des instructions en langage naturel. Le workflow ICEdit représente une solution optimale pour l'édition d'images AI, offrant des résultats précis avec des ressources GPU minimales.

2. Avantages de ComfyUI ICEdit :

• Efficacité Exceptionnelle : ICEdit réalise une édition de bonne qualité en utilisant seulement 0,5 % des données d'entraînement et 1 % des paramètres requis par les méthodes précédentes.
• Performance Ultra-Rapide : L'intégration ICEdit-Nunchaku permet une édition à grande vitesse même sur des systèmes avec seulement 4 Go de VRAM.
• Préservation de l'Identité : ICEdit maintient l'identité du sujet même à travers des modifications significatives de style ou d'attributs.
• Instructions en Langage Naturel : Modifiez les images en utilisant des invites textuelles simples avec le système d'instructions intuitif d'ICEdit.
• Édition Multi-Tours : ICEdit prend en charge les opérations d'édition séquentielles sur la même image pour des transformations complexes.
• Sortie Haute Résolution : Le workflow ICEdit inclut trois méthodes de mise à l'échelle pour des résultats de haute qualité.

3. Utilisation d'ICEdit pour l'édition d'images

Commencer :

1. Entrée d'Image :
   • Téléchargez votre image source en utilisant le nœud principal Load Image situé dans le coin inférieur gauche du workflow ICEdit
   • Il s'agit de l'entrée principale pour l'image que vous souhaitez éditer avec ICEdit
   • Le workflow ICEdit traitera automatiquement votre image aux dimensions requises (largeur de 512px)
   • Pour de meilleurs résultats ICEdit, utilisez des images carrées lorsque cela est possible, car les images non carrées peuvent être rognées au centre lors du traitement
   • Astuce Pro : Pour des taux de réussite ICEdit plus élevés, faites un clic droit sur le nœud Load Image et sélectionnez "Open in MaskEditor" pour créer manuellement un masque autour de la zone que vous souhaitez éditer
   
2. Utilisation de l'éditeur de masques avec ICEdit (Facultatif mais Recommandé) :
   • Dans le MaskEditor, utilisez les outils de pinceau pour dessiner un masque autour de la zone spécifique que vous souhaitez modifier avec ICEdit
   • Cela aide à diriger l'attention d'ICEdit vers les parties pertinentes de l'image
   • Utilisez différents réglages de pinceau (épaisseur, opacité, dureté) pour un contrôle précis
   • Cliquez sur "Save" lorsque vous avez terminé pour appliquer votre masque personnalisé au workflow ICEdit
   • Cette étape améliore considérablement les taux de réussite d'ICEdit pour les changements détaillés ou spécifiques
3. Entrée de vos instructions ICEdit :
   • Trouvez le nœud d'entrée String avec le surlignage rouge au centre du workflow ICEdit
   • Tapez votre instruction ICEdit souhaitée dans ce champ
   • Pour les transferts de style, tapez simplement des instructions comme "Convertir l'image en style Ghibli" ou "Convertir en illustration anime et maintenir la chemise rose, les cheveux bruns"
   • Laissez l'autre nœud String avec le préfixe fixe inchangé - cela contient le contexte requis qui permet à ICEdit de fonctionner correctement
   • Le workflow combinera automatiquement votre instruction avec le préfixe requis pour un traitement ICEdit optimal
   
4. Exécution du workflow ICEdit :
   • Après avoir téléchargé votre image et saisi votre instruction d'édition, cliquez sur run pour démarrer le traitement ICEdit
   • Le workflow ICEdit générera l'image éditée à travers plusieurs étapes de traitement

4. Référence de paramètres pour ICEdit

Paramètres de ICEdit :

1. Nunchaku FLUX.1 LoRA Loader pour ICEdit :
   • lora_strength: 1.00-1.18 (peut être ajusté pour l'intensité de l'effet ICEdit, 1.18 offrant les meilleurs résultats globaux)
2. Paramètres ICEdit KSamplerAdvanced :
   • Premier KSampler : 30 étapes par défaut, échantillonneur euler, CFG 7
     • Ajuster CFG : Des valeurs plus élevées (8-15) suivent les instructions plus strictement, des valeurs plus basses (3-5) augmentent la créativité
     • Ajuster les étapes : Plus d'étapes améliorent le détail mais augmentent le temps de traitement
   • Deuxième KSampler : 25 étapes par défaut pour la mise à l'échelle avec planificateur beta
   • Troisième KSampler : 30 étapes par défaut, échantillonneur kl_optimal pour préserver les détails du visage et la texture
     • Ces paramètres peuvent être ajustés en fonction de vos besoins d'édition spécifiques
3. Configuration de mise à l'échelle ICEdit :
   • Le workflow ICEdit inclut trois méthodes de mise à l'échelle :
     • Mise à l'échelle basée sur le modèle utilisant des modèles spécialisés comme 2xNomosUni
     • ImageScaleBy pour l'amélioration des détails avec la mise à l'échelle lanczos
     • Échantillonnage KL-optimal pour une restauration ICEdit haute fidélité (aide à préserver les traits du visage)
   • Si vous utilisez des modèles de grossissement 4x, envisagez de changer le facteur de mise à l'échelle à 0,5 pour éviter les artefacts dans les résultats ICEdit de grande taille
4. FluxGuidance dans ICEdit :
   • Le workflow ICEdit possède plusieurs nœuds FluxGuidance dans différentes sections, contrôlant la force de guidage
   • Conversion de style FluxGuidance : Contrôle à quel point le transfert de style ICEdit suit vos instructions
   • Édition d'image FluxGuidance : Le côté droit montre une valeur de 4.0, équilibrant la qualité et la précision ICEdit
   • Des valeurs plus élevées font qu'ICEdit suit les instructions plus précisément mais peuvent affecter la qualité de l'image
   • Des valeurs plus basses offrent plus de liberté créative mais peuvent entraîner des résultats ICEdit moins précis
5. Intégration Redux avec ICEdit (Facultatif) :
   • Le workflow ICEdit inclut les capacités de réglage fin de style Redux, mais c'est facultatif
   • Lors de l'utilisation de Redux pour le transfert de style ICEdit, vous pouvez changer pour get_condition1, bien que les résultats puissent varier

5. Tâches d'édition ICEdit Exemple

ICEdit excelle dans une variété d'opérations d'édition, y compris :

• Transferts de Style avec ICEdit : "Convertir l'image en illustration anime"
• Changements de Couleur avec ICEdit : "Changer la chemise bleue en vert"
• Modifications de Vêtements avec ICEdit : "Changer la chemise bleue en veste en denim"
• Ajout d'Accessoires via ICEdit : "Ajouter des lunettes de soleil", "Cette fille porte une montre blanche"
• Suppression d'Accessoires avec ICEdit : "Retirer l'image sur le mur"
• Altérations d'Arrière-Plan avec ICEdit : "Fille est sur la plage, nuage coloré dans le ciel"
• Manipulation d'Objets via ICEdit : "Main tenant un durian"
• Opérations de Texte/Filigrane avec ICEdit : "Ajouter un filigrane bleu 'from me' sur le mur", "Supprimer le texte 'from aha'"
• Édition Multi-Éléments via ICEdit : "Convertir en style Ghibli"

6. Conseils Avancés pour de Meilleurs Résultats ICEdit

Ingénierie d'Invites ICEdit :

• Soyez spécifique et concis dans vos instructions ICEdit
• Pour les transferts de style ICEdit, incluez les détails que vous souhaitez préserver
• Utilisez un langage descriptif clair pour obtenir les meilleurs résultats ICEdit
• Lors de la modification d'arrière-plans avec ICEdit, soyez précis sur le placement

Conseils d'Optimisation ICEdit :

• Si vous rencontrez des résultats ICEdit insatisfaisants, essayez de changer la valeur de la graine (c'est crucial pour le succès)
• Pour des éditions ICEdit complexes, envisagez de les diviser en plusieurs étapes d'édition plus simples
• Ajustez lora_strength pour contrôler l'intensité des effets ICEdit

Gestion des Échecs ICEdit :

• ICEdit fonctionne mieux avec des photographies réalistes ; les résultats peuvent varier avec des entrées non photoréalistes
• Les tâches de suppression d'objets avec ICEdit ont des taux de réussite inférieurs aux ajouts ou modifications
• Si une tentative ICEdit échoue, essayez de reformuler l'instruction ou d'utiliser une graine différente

7. Crédits et Remerciements

Ce workflow est alimenté par ICEdit, développé par Zechuan Zhang, Ji Xie, Yu Lu, Zongxin Yang, et Yi Yang de ReLER, CCAI, Zhejiang University et Harvard University. L'intégration ComfyUI d'ICEdit est rendue possible grâce aux contributions de la communauté, avec des remerciements particuliers à judian17 pour la et le travail d'optimisation.

Le workflow utilise une version spécialement adaptée d'ICEdit-MoE-LoRA où les couches d'experts ont été moyennées pour la compatibilité, permettant un traitement ICEdit de haute qualité avec des ressources informatiques minimales.

Pour des informations supplémentaires sur ICEdit, veuillez visiter :

• Page du projet :