ComfyUI Img2Vid | Morfující animace

Tento ComfyUI Img2Vid workflow vytvořil na základě výjimečné práce . Tento workflow se zaměřuje na dynamickou generaci a úpravu obrázků a skládá se z modulů AnimateDiff LCM, IPAdapter, QRCode ControlNet a Custom Mask. Každý z těchto modulů hraje klíčovou roli v procesu Img2Vid, čímž zvyšuje kvalitu morfující animace.

Hlavní komponenty workflow Img2Vid pro morfující animaci

1. Modul AnimateDiff LCM:

Integruje model AnimateLCM do nastavení AnimateDiff pro urychlení procesu renderování. AnimateLCM urychluje generování videa snížením počtu potřebných inference kroků a zlepšuje kvalitu výsledků prostřednictvím decoupled consistency learning. To umožňuje použití modelů, které obvykle neprodukují vysoce kvalitní výsledky, což činí AnimateLCM efektivním nástrojem pro vytváření detailních animací.

2. Modul IPAdapter:

Využívá funkci attention mask IPAdapter pro dosažení morfování mezi referenčními obrázky. Uživatelé mohou generovat dedikované attention masky pro každý obrázek, což zajišťuje plynulé přechody ve finálním videu.

3. Modul QRCode ControlNet:

Používá černobílé video jako vstup pro model ControlNet QRCode, který řídí tok animace a zvyšuje vizuální dynamiku morfující sekvence.

4. Modul Mask:

Poskytuje tři přednastavené masky a umožňuje uživatelům nahrát vlastní masky. Všechny tyto masky lze přepínat jednoduchým kliknutím pro dosažení různých efektů.

Jak používat workflow Img2Vid k vytvoření morfujících animací

1. Načítání obrázků a aplikace masky

• Načítání obrázků: Načtěte obrázky do uzlů "Load White" a "Load Black". Workflow obsahuje různé masky obrázků, které mohou uživatelé vybrat podle svých potřeb.

• Zpracování masek: Masky lze vybrat kliknutím na "Action!" a vlastní masky lze nahrát a aplikovat, což zvyšuje flexibilitu.

2. Úprava obrázků

• Rotace, ořezávání a převracení obrázků: Upravte obrázky pomocí funkcí "Rotate Mask" a "Flip Image" pro dosažení požadovaných efektů. Funkce "Fast Crop" umožňuje uživatelům vybrat mezi ořezáváním na střed nebo přidáním černých okrajů, aby obrázky seděly. Funkce "Detail Crop" umožňuje ořezávání specifických detailů z obrázků. (Tato funkce vám poskytuje větší kontrolu nad vašimi výtvory, takže ji povolte, pokud to potřebujete!)

3. Úprava parametrů

• AnimateDiff - Motion Scale: Úprava tohoto parametru mění plynulost animace. Zvýšení hodnoty přidává více pohybu, ale může snížit kvalitu detailů. Doporučený rozsah je 1.000-1.300, přičemž se doporučuje experimentování.

• QRCode ControlNet - Strength a End Percent: Tyto parametry řídí intenzitu animace a efekt přechodu. Obecně nastavte "Strength" mezi 0.4 a 1.0 a "End Percent" mezi 0.350 a 0.800.

• Mask - Force Rate: Nastavte na "0" pro počáteční rychlost nebo "12" pro zrychlené a zdvojené cykly. Upravte tuto hodnotu na základě délky animace a potřeb efektů.

• IPAdapter - Preset: Doporučuje se použít preset "VIT-G" pro stabilnější výsledky. Pro výsledky blíže k původním obrázkům přepněte na preset “PLUS” a nastavte “weight_type” na “ease in-out.”

Pro více informací a zhlédnutí původní práce navštivte stránku autora na Civitai .