ComfyUI Img2Vid | Animacja morfingu

Ten workflow ComfyUI Img2Vid został stworzony przez na podstawie wyjątkowej pracy . Workflow ten, koncentrując się na generowaniu i dostosowywaniu dynamicznych obrazów, składa się z modułów AnimateDiff LCM, IPAdapter, QRCode ControlNet i Custom Mask. Każdy z tych modułów odgrywa kluczową rolę w procesie Img2Vid, zwiększając jakość animacji morfingu.

Główne komponenty workflow Img2Vid do animacji morfingu

1. Moduł AnimateDiff LCM:

Integruje model AnimateLCM z ustawieniem AnimateDiff, aby przyspieszyć proces renderowania. AnimateLCM przyspiesza generowanie wideo poprzez zmniejszenie liczby wymaganych kroków wnioskowania i poprawia jakość wyników dzięki odseparowanemu uczeniu spójności. Umożliwia to użycie modeli, które zazwyczaj nie dają wysokiej jakości wyników, czyniąc AnimateLCM skutecznym narzędziem do tworzenia szczegółowych animacji.

2. Moduł IPAdapter:

Wykorzystuje funkcję maski uwagi IPAdapter do osiągnięcia morfingu między obrazami referencyjnymi. Użytkownicy mogą generować dedykowane maski uwagi dla każdego obrazu, zapewniając płynne przejścia w końcowym wideo.

3. Moduł QRCode ControlNet:

Używa czarno-białego wideo jako wejścia dla modelu ControlNet QRCode, kierując przepływem animacji i zwiększając wizualną dynamikę sekwencji morfingu.

4. Moduł Mask:

Oferuje trzy wstępnie ustawione maski i pozwala użytkownikom na ładowanie niestandardowych masek. Wszystkie te maski można przełączać za pomocą jednego kliknięcia, aby uzyskać różne efekty.

Jak używać workflow Img2Vid do tworzenia animacji morfingu

1. Ładowanie obrazów i zastosowanie maski

• Ładowanie obrazów: Załaduj obrazy do węzłów "Load White" i "Load Black". Workflow zawiera różne maski obrazów, które użytkownicy mogą wybrać w zależności od swoich potrzeb.

• Przetwarzanie maski: Maski można wybierać, klikając "Action!" i można ładować i stosować niestandardowe maski, zwiększając elastyczność.

2. Dostosowanie obrazów

• Obracanie, kadrowanie i odwracanie obrazów: Dostosuj obrazy za pomocą funkcji "Rotate Mask" i "Flip Image", aby uzyskać pożądane efekty. Funkcja "Fast Crop" umożliwia użytkownikom wybór między kadrowaniem centralnym a dodawaniem czarnych obramowań, aby obrazy pasowały. Funkcja "Detail Crop" umożliwia kadrowanie określonych szczegółów z obrazów. (Ta funkcja daje większą kontrolę nad tworzeniem, więc włącz ją, jeśli tego potrzebujesz!)

3. Dostosowanie parametrów

• AnimateDiff - Motion Scale: Dostosowanie tego parametru zmienia płynność animacji. Zwiększenie wartości dodaje więcej ruchu, ale może zmniejszyć jakość szczegółów. Zalecany zakres to 1.000-1.300, z zachętą do eksperymentowania.

• QRCode ControlNet - Strength and End Percent: Te parametry kontrolują intensywność animacji i efekt przejścia. Zazwyczaj dostosuj "Strength" między 0.4 a 1.0 i "End Percent" między 0.350 a 0.800.

• Mask - Force Rate: Ustaw na "0" dla początkowej prędkości lub "12" dla przyspieszonych i podwojonych cykli. Dostosuj tę wartość w zależności od długości animacji i potrzeb efektów.

• IPAdapter - Preset: Zaleca się użycie preset "VIT-G" dla bardziej stabilnych wyników. Dla wyników bliższych oryginalnym obrazom, przełącz się na preset "PLUS" i ustaw "weight_type" na "ease in-out".

Więcej informacji i oryginalną pracę można znaleźć na stronie Civitai autora .