FLUX NF4 | Zrychlete FLUX ImgGen

FLUX je nový model generování obrázků vyvinutý společností . Tento model FLUX NF4 je vytvořen autorem lllyasviel, prosím navštivte pro více informací.

O FLUX

Modely FLUX jsou předem nahrány na RunComfy, pojmenované flux/flux-schnell a flux/flux-dev.

• Při spuštění středně velkého stroje RunComfy: Vyberte kontrolní bod flux-schnell, fp8 a klip t5_xxl_fp8, abyste se vyhnuli problémům s nedostatkem paměti.
• Při spuštění velkého nebo většího stroje RunComfy: Zvolte velký kontrolní bod flux-dev, default a vysoký klip t5_xxl_fp16.

Pro více podrobností navštivte: 

Úvod do FLUX NF4

FLUX NF4 je specializovaný modelový kontrolní bod navržený pro optimalizaci výkonu v pracovních postupech Stable Diffusion. Vyvinutý autorem lllyasviel, tento model využívá kvantizaci NF4 (Normal Float 4-bit) ke značnému zlepšení rychlosti inference a snížení využití paměti ve srovnání s tradičními modely FP8 (Float 8-bit). FLUX NF4 je součástí série modelů zaměřených na zvýšení efektivity, zejména na novějších GPU architekturách, jako jsou série NVIDIA RTX 3000 a 4000. Model zahrnuje pokročilé funkce jako "Distilled CFG Guidance", které zpřesňují proces generování obrázků s přesnějšími výzvami. Na špičkovém GPU, jako je RTX 4090, trvá běžnému modelu FLUX vytvoření obrázku přibližně 50 sekund, zatímco FLUX NF4 trvá jen asi 13-14 sekund. To činí FLUX NF4 přístupným širšímu okruhu uživatelů, kteří nemusí mít špičkový hardware.

Jak používat ComfyUI FLUX NF4

1. Načítání modelu: CheckpointLoaderNF4

Tento uzel načítá model FLUX (flux/flux1-dev-bnb-nf4-v2.safetensors). Model je zodpovědný za vedení celého procesu generování obrázků tím, že poskytuje základní rámec, který kontroluje chování a vlastnosti generovaných obrázků.

2. Generování náhodného šumu: RandomNoise

Tento uzel generuje náhodný šumový vzor, který slouží jako počáteční vstup pro generování obrázků. Šum funguje jako výchozí bod, který bude transformován do konečného výsledku.

3. Model Sampling Flux: ModelSamplingFlux

Uzel ModelSamplingFlux upravuje chování vzorkování modelu na základě rozlišení a dalších parametrů. Optimalizuje výstup modelu, aby byla zachována kvalita obrázku při aplikaci transformací. Pokud nechcete upravovat chování vzorkování, tento uzel lze obejít.

4. Nastavení rozměrů obrázku: PrimitiveNode (Šířka a Výška)

Tyto uzly definují rozměry obrázku (šířka a výška), obvykle nastavené na 1024x1024. Specifikované rozměry ovlivňují rozlišení a úroveň detailů generovaného obrázku.

5. Kondicionování s CLIP Text: CLIPTextEncode (Pozitivní a Negativní)

Uzel CLIPTextEncode kóduje textové výzvy do kondičních dat, které vedou proces generování obrázků. Pozitivní výzvy zvýrazňují požadované funkce, zatímco negativní výzvy potlačují nežádoucí, což vám umožňuje ovládat obsah a styl výstupu.

6. Použití Flux Guidance: FluxGuidance

Uzel FluxGuidance aplikuje vodicí měřítko (např. 3.5) na kondiční data. Toto měřítko upravuje vliv textových výzev na konečný výsledek, což umožňuje jemné doladění generovaného výstupu.

7. Plánování s BasicScheduler: BasicScheduler

Tento uzel spravuje plánování procesu generování obrázků, kontroluje přechod od šumu k finálnímu obrázku. Plánovací parametry ovlivňují, jak rychle a hladce se obrázek vyvíjí během generování.

8. Vlastní vzorkování: SamplerCustomAdvanced

Tento pokročilý vzorkovací uzel zjemňuje obrázek aplikací dalších transformací na latentní obrázek. Integruje šum, vodítko, vzorkovač, sigmy a latentní obrazová data k vytvoření vysoce kvalitního výstupu.

9. Dekódování VAE: VAEDecode

Uzel VAEDecode dekóduje latentní obrázek do skutečného vizuálního obrázku pomocí VAE (Variational Autoencoder). Tento krok je zásadní pro převod abstraktního latentního prostoru do viditelného a interpretovatelného obrázku.

10. Zvýšení rozlišení obrázku: UpscaleModelLoader a UltimateSDUpscale

Uzel UpscaleModelLoader načítá model pro zvýšení rozlišení (např. 4x-UltraSharp.pth), a uzel UltimateSDUpscale aplikuje tento model ke zvýšení rozlišení obrázku. Tento krok zajišťuje, že konečný obrázek je ostrý a detailní, i při vyšších rozlišeních.

Licence

Zobrazit soubory licencí:

Model FLUX.1 [dev] je licencován společností Black Forest Labs. Inc. pod licencí FLUX.1 [dev] Non-Commercial License. Copyright Black Forest Labs. Inc.

V ŽÁDNÉM PŘÍPADĚ NEBUDE BLACK FOREST LABS, INC. ODPOVĚDNÁ ZA JAKÉKOLI NÁROKY, ŠKODY NEBO JINOU ODPOVĚDNOST, AŤ UŽ V RÁMCI SMLOUVY, DELIKTU NEBO JINAK, VYPLÝVAJÍCÍ Z POUŽITÍ TOHOTO MODELU.