Průvodce používáním ComfyUI Reaktoru pro výměnu tváří ve videu

Ahoj milovníci AI animací! Vydáváme se na vzrušující cestu do světa výměny tváří pomocí ComfyUI. Zde vám představujeme pracovní postup ComfyUI Reaktor, který vám umožní vyměnit buď jednu tvář, nebo více tváří ve videu!

Probereme:

1. Roop vs. Reaktor
2. Co je ComfyUI Reaktor?
3. Jak používat Reaktor v ComfyUI?
   • Nastavení vašich obrázků
   • Model výměny tváří
   • Detekce tváří
   • Obnovení tváří
   • Viditelnost obnovení tváří a váha CodeFormer (věrnost)
   • Detekce pohlaví
   • Zavedení indexu tváří pro výměnu jedné nebo více tváří ve videu
4. Chytrá interpolace snímků, pokud je potřeba
5. Změna velikosti a doladění, pokud je potřeba

1. Roop vs. Reaktor

Myslím, že někteří z vás používali rozšíření Roop v Automatic 1111 pro tyto druhy kreativních experimentů, ale kód pro Roop je ukončen. Motion designéři a animátoři přijímají nového šampiona výměny tváří – ReActor v ComfyUI. Tento nástroj není jen upgrade z Roop; je to úplná revoluce. ReActor přeměnil výměnu tváří na bezproblémovou a vzrušující součást vašeho kreativního nástroje.

Tak proč je ReActor novým favoritem pro výměnu tváří? Tady je shrnutí:

• Výměny tváří ve vysokém rozlišení s upscalingem: Rozlučte se s rozmazanými obrázky a přivítejte křišťálově čisté, ostré vizuály.
• Přátelský k CPU: Není potřeba vysoce výkonný GPU, což ho činí přístupným pro více uživatelů.
• Univerzální kompatibilita: Funguje skvěle s modely SDXL a 1.5 – je to jako mít univerzální dálkové ovládání pro výměnu tváří!
• Chytrá detekce: Automatická detekce pohlaví a věku znamená, že ví přesně, kdo je kdo ve vašem videu.
• Necenzurované tvoření: Bez filtru NSFW může vaše kreativita opravdu běžet naplno.
• Nepřetržité zlepšování: ReActor se stále zlepšuje, stejně jako kvalitní víno, které s věkem zraje.

Teď, pojďme se nejen o tom bavit; ponořme se do toho, jak používat Reaktor v ComfyUI a jak nastavit parametry v Reaktoru! S ReActorem jsou vaše kreativní možnosti nekonečné.

2. Co je ComfyUI Reaktor?

ComfyUI Reaktor je rychlý a jednoduchý uzel pro výměnu tváří v ComfyUI. Využívá několik modelů k usnadnění detekce tváří, výměny tváří a obnovení tváří, přičemž zachovává jednoduchost použití.

3. Jak používat Reaktor v ComfyUI?

Dobře, pojďme se ponořit do vzrušujícího procesu tvorby vašeho pracovního postupu. S Reaktorem budete moci přidat úžasné efekty výměny tváří do vašich animací.

3.1 Nastavení vašich obrázků

Nejprve musíte vybrat svůj 'zdrojový obrázek' - myslete na to jako na dárce tváře. Potom vyberte svůj 'vstupní obrázek' – to je ten šťastný příjemce nové tváře.

3.2 Model výměny tváří

Už jsme stáhli inswapper_128.onnx model, předtrénované modely inswapper_128.onnx, které poskytuje InsightFace.

3.3 Detekce tváří

Detekce tváří je jako mít digitálního detektiva, který rozpoznává tváře jak ve vašich zdrojových, tak i vstupních obrázcích. Máme různé detektivy - resnet50, mobile0.25, YOLOv5l a YOLOv5n. Ale náš oblíbený je retinaface_resnet50. Jeho výkon je skvělý.

3.4 Obnovení tváří

Zde si můžete vybrat model pro obnovení tváří. Někteří preferují GF PGN, ale zkuste také Code Forer - je také skvělý!

3.5 Viditelnost obnovení tváří a váha CodeFormer (věrnost)

Tato nastavení jsou jako ladění vaší kytary. Výchozí nastavení jsou 1.00 pro viditelnost a 0.75 pro váhu CodeFormer, ale neváhejte si s nimi pohrát a zjistit, jaké melodie můžete vytvořit.

3.6 Detekce pohlaví? Možná ne

Možnost 'detekce pohlaví' rozhoduje, zda chcete, aby model zjistil pohlaví na obrázcích. ReActor vymění tvář pouze tehdy, pokud splňuje danou podmínku. Z mé zkušenosti, nastavení na 'ne' dává skvělé výsledky. Možná je to jako říct modelu, "Všechny oči na tvář, modelko!"

3.7 Zavedení indexu tváří

Index tváří pomáhá systému identifikovat každou tvář na vašich obrázcích. Tváře jsou označeny zleva doprava a shora dolů na svých příslušných obrázcích. Tímto způsobem systém přesně ví, kdo je kdo.

3.7.1 Nastavení pro výměnu jedné tváře

Máte jen jednu tvář k výměně? Snadné! Jak zdrojová tvář, tak vstupní tvář budou mít index 0.

3.7.2 Nastavení pro více tváří

Pokud jste ambiciózní a chcete vyměnit více tváří, tady je návod:

Výměna více tváří v samostatných obrázcích

• Při práci s postavou vlevo ve vaší animaci nastavte jak Zdrojový, tak Vstupní Index tváře na 0. To instruuje Reaktor, "Použij Zdrojový obrázek pro nahrazení levé postavy ve vstupním obrázku."
• Pro postavu umístěnou vpravo upravte Zdrojový Index na 0 a Vstupní Index tváře na 1. To směruje Reaktor, "Použij Zdrojový obrázek pro nahrazení pravé postavy ve vstupním obrázku."
• Pamatujte, pokud je každá postava v samostatném obrázku, budete potřebovat dva sady uzlů Reaktor.

Výměna více tváří v jednom obrázku

• Pokud máte obrázek s dvěma postavami, jeden uzel Reaktor postačí.
• Tady to začíná být zábavné. Můžete kombinovat a měnit tváře. Řekněme, že chcete vyměnit druhou tvář ve vstupním obrázku (to je index = 1) s první tváří ve zdrojovém obrázku (index = 0) a chcete vyměnit první tvář ve vstupním obrázku (to je index = 0) s druhou tváří ve zdrojovém obrázku (index = 1). Vše, co musíte udělat, je nastavit své indexy takto: Zdroj - 0,1; Vstup - 1,0.

4. Chytrá interpolace snímků, pokud je potřeba

Tady je užitečný tip - zvažte použití interpolátoru snímků. Představte si to jako stroj času pro vaše video snímky. Funguje úžasně tím, že snižuje počet snímků, které musíte zpracovat na začátku, a pak je brilantně rekonstruuje později. To je zvláště užitečné, pokud jste museli obětovat kvalitu vašeho videa kvůli rychlejšímu zpracování. Myslete na tento krok jako na kouzelnou hůlku, která vám pomůže znovu získat ztracenou jasnost a detaily.

5. Změna velikosti a doladění, pokud je potřeba

Můžete také změnit velikost vašich video obrázků před jejich předáním interpolátoru. I když je obtížné dosáhnout kvality původního souboru, je to rozhodně lepší než nic.

Autor: Redakce RunComfy

Náš tým redaktorů pracuje s AI více než 15 let, začínal s NLP/Vision v době RNN/CNN. Nasbírali jsme obrovské množství zkušeností s AI chatboty/uměním/animací, jako jsou BERT/GAN/Transformer, atd. Kontaktujte nás, pokud potřebujete pomoc s AI uměním, animací a videem.