Flux Klein Face Swap per ComfyUI: sostituzione del volto senza soluzione di continuità guidata dai prompt#
Flux Klein Face Swap è un workflow focalizzato di ComfyUI che sostituisce un volto in un'immagine con un volto da un'altra mantenendo la posa, l'illuminazione e la coerenza delle texture. Si basa sulla generazione e modifica unificata delle immagini di FLUX Klein per offrire sostituzioni realistiche che si fondono naturalmente con la scena.
Questo workflow è ideale per l'editing di ritratti, la creazione di personaggi e il perfezionamento dei contenuti. Fornisci un'immagine di base e un'immagine sorgente del volto, guida la sostituzione con un breve prompt e il pipeline Flux Klein Face Swap allinea la geometria, trasferisce l'identità e rende un risultato pulito con un eventuale upscaling.
Modelli chiave nel workflow Comfyui Flux Klein Face Swap#
- Black Forest Labs FLUX.2-klein 9B FP8. Il Diffusion Transformer centrale utilizzato qui per l'editing e la sintesi delle immagini. Integra il nuovo volto mantenendo stabile lo stile e la composizione della scena. Model card
- FLUX.2-klein 4B. Un'alternativa più leggera che riduce la memoria e accelera l'iterazione con una capacità leggermente inferiore. Utile per bozze o GPU limitate. Model card
- Qwen 3 text encoder 8B o 4B. Fornisce la comprensione dei prompt per FLUX 2 in modo che la sostituzione rispetti le tue istruzioni testuali su identità, posa e stile. I file sono distribuiti con le divisioni Klein. Repository
- Flux 2 VAE. Codifica le immagini nello spazio latente utilizzato da FLUX e decodifica il latente finale in pixel con fedeltà di colore e tono. Repository
- YOLOX object detector e DWPose estimator. Utilizzati durante la preprocessazione per localizzare il volto e la posa generale del corpo così che l'allineamento sia naturale dopo la sostituzione. YOLOX DWPose
Come utilizzare il workflow Comfyui Flux Klein Face Swap#
Il pipeline scorre dagli input alla preprocessazione, condizionamento di riferimento, campionamento FLUX, decodifica e upscaling opzionale. Ogni fase seguente nomina i nodi UI chiave che vedrai.
Carica gli input con LoadImage (#81) e LoadImage Face Swap Image (#244)#
Scegli la foto di base in LoadImage (#81). Questa è la scena e il vestiario che vuoi mantenere. Scegli il ritratto del donatore in Face Swap Image (#244). Questo fornisce l'identità da trasferire. Scegli immagini con dimensioni della testa simili e angolazione generale per i migliori risultati. Entrambe le immagini sono ridimensionate internamente a una risoluzione di lavoro coerente.
Rileva posa e volti con DWPreprocessor (#267) e normalizza con ImageResizeKJv2 (#468)#
Il preprocessore analizza l'immagine di base per trovare i punti chiave della testa e del corpo, producendo una guida che codifica il layout facciale e la posa. Ciò garantisce che Flux Klein Face Swap allinei il nuovo volto con l'orientamento e l'illuminazione originali. Il risultato è ridimensionato per adattarsi alle dimensioni di lavoro in modo che i passaggi successivi utilizzino una geometria coerente. Non è necessario fornire una maschera.
Descrivi la sostituzione con CLIPTextEncode (#250)#
Fornisci un'istruzione breve che chiarisca cosa dovrebbe cambiare e cosa dovrebbe rimanere. Ad esempio, “sostituisci la testa nell'immagine 1 con la testa dall'immagine 2, mantieni il vestiario e la posa dall'immagine 1, abbina il tono della pelle e l'illuminazione.” Il text encoder converte il tuo prompt in un condizionamento che guida il modello durante il campionamento. Un linguaggio chiaro e specifico produce sostituzioni più fedeli.
Costruisci il condizionamento di riferimento con VAEEncode e ReferenceLatent (#257, #253, #269)#
L'immagine di base, l'immagine sorgente del volto e la guida alla posa sono ciascuna codificate in latenti con VAEEncode. ReferenceLatent (#257) prima lega l'immagine di base al tuo prompt in modo che lo stile e la scena siano preservati. ReferenceLatent (#253) inietta l'identità del volto del donatore come riferimento. ReferenceLatent (#269) aggiunge la geometria rilevata, che blocca la posizione della testa e le proporzioni prima del campionamento.
Pianifica e campiona con FLUX utilizzando UNETLoader (#180), Flux2Scheduler (#237), KSamplerSelect (#240), BasicGuider (#277), e SamplerCustomAdvanced (#261)#
UNETLoader (#180) carica il modello FLUX.2-klein che esegue l'effettiva modifica. Flux2Scheduler (#237) imposta il programma di denoising alla larghezza e altezza di lavoro in modo che la risoluzione latente rimanga coerente. BasicGuider (#277) combina il modello con il tuo condizionamento assemblato e lo passa al campionatore. Seleziona un campionatore in KSamplerSelect (#240) e mantieni un seme fisso in RandomNoise (#256) per riprodurre i risultati durante l'iterazione. SamplerCustomAdvanced (#261) genera quindi il latente del volto sostituito in un unico percorso senza mascheratura manuale.
Decodifica e rivedi con VAEDecode (#251), PreviewImage (#457), e Image Comparer (rgthree) (#452)#
VAEDecode (#251) trasforma il latente finale in pixel. Usa PreviewImage (#457) per verificare rapidamente identità, continuità del tono della pelle e margini dell'attaccatura dei capelli. Confronta il prima e il dopo con Image Comparer (rgthree) (#452) per confermare che il vestiario, la posa e lo sfondo rimangano intatti. Se necessario, perfeziona il tuo prompt e riesegui per modificare l'espressione o lo stile.
Upscale e salva con SeedVR2VideoUpscaler (#326) e SaveImage (#467)#
L'upscaler migliora i dettagli e leviga le piccole cuciture rispettando l'identità modificata. Mantieni la correzione del colore coerente tra le esecuzioni per evitare variazioni nel tono della pelle. Quando sei soddisfatto, SaveImage (#467) scrive il risultato finale con un prefisso di file chiaro in modo che i lotti rimangano organizzati. L'upscaler è opzionale se lavori già ad alta risoluzione.
Nodi chiave nel workflow Comfyui Flux Klein Face Swap#
DWPreprocessor (#267)#
Ruolo: rileva segnali del corpo e del volto che stabilizzano l'allineamento. Aumenta la risoluzione se i volti sono piccoli nel fotogramma. Abilita il rilevamento di volto e corpo insieme per ritratti che includono spalle o mani per mantenere la continuità delle proporzioni.
ReferenceLatent (#257)#
Ruolo: ancora lo stile e la scena dell'immagine di base al prompt in modo che la sostituzione non si discosti. Se l'ambiente o l'abbigliamento cambiano involontariamente, regola il ritaglio dell'immagine di base in modo che questo riferimento enfatizzi la regione che vuoi preservare.
ReferenceLatent (#253)#
Ruolo: inietta l'identità del donatore. Per un forte trasferimento di identità, usa un ritratto del donatore nitido e frontale con espressione neutra. Evita trucco pesante o occlusioni che potrebbero sovrapporre caratteristiche indesiderate.
ReferenceLatent (#269)#
Ruolo: applica la geometria spaziale dal passaggio di rilevamento in modo che il nuovo volto si posi naturalmente sulla testa e sul collo. Usa quando la posa o l'angolo della testa sono importanti. Se desideri più libertà nell'espressione, scegli un'immagine di base con l'espressione target piuttosto che indebolire questo vincolo.
Flux2Scheduler (#237)#
Ruolo: definisce il percorso di denoising alla tua risoluzione di lavoro. Più passaggi possono affinare le texture sottili ma costano tempo. Mantieni larghezza e altezza ereditate dal pipeline per evitare disallineamenti di aspetto con l'input EmptyFlux2LatentImage.
SamplerCustomAdvanced (#261)#
Ruolo: esegue il denoising guidato utilizzando la tua scelta di campionatore e seme. Usa un seme coerente per confronti A/B e cambia solo una cosa alla volta, tipicamente il prompt. Se i risultati sembrano troppo elaborati, prova un campionatore meno aggressivo o riduci il denoising effettivo partendo da un riferimento più forte.
SeedVR2VideoUpscaler (#326)#
Ruolo: miglioramento finale e pulizia dei bordi. Aumenta moderatamente la risoluzione target per mantenere stabile l'identità. Se i colori cambiano, abilita la correzione del colore e mantieni basso il rumore di input per preservare la continuità del tono della pelle.
Extra opzionali#
- Scegli foto di input con dimensioni della testa e orientamento simili per il più convincente Flux Klein Face Swap.
- Mantieni i prompt brevi e letterali. Menziona cosa sostituire, cosa mantenere e eventuali note di stile.
- Usa un seme fisso mentre esplori i prompt, poi varia il seme per aggiungere cambiamenti sottili di espressione.
- Se appare una discrepanza nel tono della pelle, aggiungi una frase come “abbina il tono della pelle e l'illuminazione” al prompt.
- Ottieni il consenso e segui le leggi locali e le licenze dei modelli quando esegui qualsiasi sostituzione del volto.
Riconoscimenti#
Questo workflow implementa e si basa sui seguenti lavori e risorse. Ringraziamo sentitamente @Ai Verse's Flux Klein Face Swap Source workflow per i loro contributi e manutenzione. Per dettagli autorevoli, si prega di fare riferimento alla documentazione originale e ai repository collegati di seguito.
Risorse#
- Flux Klein/Face Swap Source
- Documenti / Note di Rilascio: @Ai Verse's YouTube
Nota: L'uso dei modelli, dataset e codice di riferimento è soggetto alle rispettive licenze e termini forniti dai loro autori e manutentori.
