Tutorial del flusso di lavoro#
Flusso di lavoro video timeline LTX 2.3 Director 2.0 per ComfyUI#
LTX 2.3 Director 2.0 è un flusso di lavoro ComfyUI orientato alla timeline per generare, estendere, riprendere e modificare video LTX‑2.3 con consapevolezza audio. È costruito attorno al nodo timeline di terze parti LTX Director 2.0 e a una pipeline di rendering a due fasi che prima imposta la scena, poi esegue l'upscaling e il raffinamento. Il risultato è un processo controllabile in stile tela, ideale per i filmmaker AI che desiderano sequenze più lunghe e sincronizzate senza rinunciare alla iterazione creativa.
Questo grafico verificato guida il modello distillato Lightricks’ LTX‑2.3 22B con VAEs video e audio dedicati e l'upscaler spaziale x2 LTX‑2.3. I prompt, le guide di movimento e le riprese opzionali vengono create direttamente sulla timeline, e il flusso di lavoro mantiene automaticamente stabile l'inquadratura durante l'upscale della Fase 2. È pronto per RunComfy e progettato per una produzione quotidiana affidabile.
Modelli chiave nel flusso di lavoro Comfyui LTX 2.3 Director 2.0#
- Lightricks LTX‑2.3 22B Distilled (solo trasformatore) – la spina dorsale video generativa che sintetizza movimento e visuali da testo e guide. Model card
- LTX‑2.3 Video VAE (bf16) – codifica/decodifica latenti video per un'efficace denoising e ricostruzione finale dei fotogrammi. Assets
- LTX‑2.3 Audio VAE (bf16) – trasforma l'audio della timeline in latenti per una guida consapevole dell'audio e ripristina l'onda sonora alla fine. Assets
- LTX‑2.3 Spatial Upscaler x2 v1.1 – super-risoluzione nello spazio latente che raddoppia il dettaglio spaziale prima del passaggio finale. Assets
- Proiezione Testo LTX‑2.3 – mappa i prompt nello spazio di embedding del modello per un condizionamento coerente. Assets
- VAE Tiny opzionale per anteprime (taeltx2_3) – VAE di anteprima leggero utilizzato per anteprime modello rapide. Kijai LTX2.3_comfy
Gli strumenti della timeline e i nodi guida sono forniti dall'estensione personalizzata ComfyUI di WhatDreamsCost. WhatDreamsCost‑ComfyUI
Come usare il flusso di lavoro Comfyui LTX 2.3 Director 2.0#
Questo flusso di lavoro funziona in due fasi coordinate: la Fase 1 costruisce un video coerente e un latente audio dalla timeline di LTX Director; la Fase 2 esegue l'upscaling, preserva l'inquadratura e raffina i dettagli; il gruppo Process Video decodifica i fotogrammi, ripristina l'audio, imposta fps e scrive il file finale.
Modelli + Anteprima#
Il gruppo “Models + Preview” carica la spina dorsale distillata LTX‑2.3 22B, VAEs video e audio, e l'upscaler spaziale x2. ModelPreviewOverrideKJ (#10) abbina la spina dorsale a un VAE di anteprima piccolo per consentirti di scrutare e controllare i prompt prima di un campionamento completo. LTXDirector (#131) è la tela dove imposti durata, frame rate, prompt globali e per segmento, indicazioni di movimento e impostazioni audio. Se pianifichi riprese iterative, mantieni il seme RandomNoise (#30) costante per conservare la struttura tra le modifiche.
Fase #1#
La Fase 1 converte la tua timeline in condizionamento e un latente audio-video di base. LTXVConditioning (#27) riceve il condizionamento positivo dal direttore e un negativo azzerato tramite ConditioningZeroOut (#128) per una base pulita. LTXDirectorGuide (#133) unisce dati guida, guide di movimento, il modello e il VAE video per produrre condizionamento guidato e un latente video iniziale; l'audio dal direttore è combinato tramite LTXVConcatAVLatent (#29). Lo stack di campionatori (CFGGuider (#28), BasicScheduler (#33), KSamplerSelect (#32), SamplerCustomAdvanced (#31)) denoisa questo latente AV in un risultato di prima passata, che viene poi suddiviso da LTXVSeparateAVLatent (#34) in modo che il latente audio possa essere portato avanti.
Fase #2 Upscale#
La Fase 2 preserva l'inquadratura aggiungendo dettaglio spaziale e raffinamento. LTXDirectorCropGuides (#55) analizza il latente video e il condizionamento della Fase 1 per produrre guide di ritaglio che mantengono stabili i soggetti durante l'upscale. LTXVLatentUpsampler (#14) applica il modello spaziale x2 LTX‑2.3 al latente video utilizzando il VAE video completo, poi LTXDirectorGuide (#132) riapplica la guida della timeline al latente ad alta risoluzione e lo riunisce con il latente audio portato avanti tramite LTXVConcatAVLatent (#18). Il secondo stack di campionatori (CFGGuider (#17), BasicScheduler (#21), KSamplerSelect (#20), SamplerCustomAdvanced (#19)) produce il latente AV finale; un'ultima passata di LTXDirectorCropGuides (#54) garantisce che i ritagli siano rispettati prima della decodifica.
Process Video#
VAEDecode (#1) trasforma il latente video finale in fotogrammi con il VAE video ad alta fedeltà, mentre LTXVAudioVAEDecode (#24) ripristina l'onda sonora dal latente audio. CreateVideo (#2) unisce fotogrammi e audio alla frequenza dei fotogrammi trasmessa dal direttore, e SaveVideo (#37) scrive il file nella cartella di output definita nel nodo. Se il tuo finale sembra disallineato con il tempo, regola la frequenza dei fotogrammi o i confini dei segmenti della timeline del direttore e ri-renderizza.
Nodi chiave nel flusso di lavoro Comfyui LTX 2.3 Director 2.0#
LTXDirector (#131)#
Il cervello della timeline del flusso di lavoro. Crea il prompt globale, posiziona i prompt per segmento, abilita le tracce audio e di movimento e imposta durata e frame rate. Usa le riprese specificando la finestra di ripresa e il prompt; solo quella finestra verrà rigenerata, preservando il contesto circostante. Abilita il montaggio consapevole dell'audio per permettere alla colonna sonora o al VO di influenzare il ritmo e l'accentuazione. L'input latente opzionale può essere utilizzato per ancorare le iterazioni quando desideri una struttura di ripresa coerente.
LTXDirectorGuide (#133)#
Guida della Fase 1 che converte i prompt della timeline, i dati guida e le indicazioni di movimento in condizionamento e un latente video seme. Stabilisce composizione e flusso di movimento a risoluzione di base. Regolalo quando hai bisogno di una maggiore aderenza narrativa o di un blocco più chiaro prima dell'upscale. Le sue uscite guidano il campionatore della Fase 1 e preparano la guida al ritaglio per la fase successiva.
LTXDirectorGuide (#132)#
Guida della Fase 2 operante dopo l'upscale spaziale x2. Re-inietta la stessa intelligenza della timeline ad alta risoluzione in modo che i dettagli si affinino senza rompere la composizione. Quando spingi per più texture o micro-movimento, orienta le decisioni qui in modo che la Fase 2 affini piuttosto che riscriva l'intento della Fase 1.
LTXVLatentUpsampler (#14)#
Applica l'upscaler spaziale x2 v1.1 LTX‑2.3 nello spazio latente per aggiungere dettagli in modo efficiente. Usalo per raddoppiare la fedeltà spaziale prima del passaggio finale di denoising, che generalmente migliora i bordi, i piccoli oggetti di scena e la tipografia. Lascialo attivo per i rendering master; considera di bypassarlo solo per previs molto veloci.
LTXDirectorCropGuides (#55)#
Calcola finestre di ritaglio per segmento in modo che l'inquadratura del soggetto sopravviva al percorso di upscale. Usalo ogni volta che hai composizioni specifiche per ripresa, riframmentazioni o letterboxing per mantenere un aspetto coerente tra entrambe le fasi. Se vedi ritagli che si spostano, rivedi i segmenti della tua timeline e rigenera le guide.
SamplerCustomAdvanced (#31)#
Campionatore della Fase 1 che traduce il condizionamento nel latente AV di base. Abbinalo alla guida e al scheduler della Fase 1 per bilanciare aderenza ed esplorazione. Per riprese stabili, mantieni lo stesso seme di rumore; per nuove varianti, randomizza il seme.
SamplerCustomAdvanced (#19)#
Campionatore della Fase 2 che finalizza i dettagli dopo l'upscale. Dovrebbe rimanere armonizzato con le scelte della Fase 1 in modo che il raffinamento rimanga fedele. Quando i risultati sembrano troppo levigati o troppo nitidi, regola il tipo di campionatore o l'abbinamento del scheduler qui per primo.
Extra opzionali#
- Per estendere una sequenza, aggiungi segmenti sulla timeline del direttore e aumenta la durata; il flusso di lavoro propagherà automaticamente il nuovo tempismo e l'audio.
- Per modifiche sincronizzate al ritmo, abilita il montaggio consapevole dell'audio e posiziona segmenti audio; il VAE audio guiderà movimento e enfasi durante il campionamento.
- Se desideri riprese riproducibili, mantieni fisso
RandomNoise(#30); per esplorare alternative, cambia il seme tra i rendering. - Il VAE di anteprima accelera lo sviluppo dell'aspetto; conta sulla decodifica VAE video solo per i finali per risparmiare tempo.
- Mantieni il metodo di ridimensionamento del direttore su mantieni-aspetto per evitare stiramenti indesiderati dopo il passaggio di upscale.
- L'organizzazione dell'output è controllata in
SaveVideo(#37); imposta una cartella chiara per progetto per mantenere ordinate le iterazioni.
Link e riferimenti
- Modelli e asset LTX‑2.3: Lightricks/LTX‑2.3
- Nodi timeline e guida: WhatDreamsCost‑ComfyUI
- Utilità di anteprima: ComfyUI‑KJNodes
- VAE di anteprima piccola: Kijai LTX2.3_comfy
Riconoscimenti#
Questo flusso di lavoro implementa e si basa sui seguenti lavori e risorse. Ringraziamo sentitamente MDMZ per il tutorial del flusso di lavoro, WhatDreamsCost per i nodi WhatDreamsCost-ComfyUI e Lightricks per il modello LTX-2.3 per il loro contributo e manutenzione. Per dettagli autorevoli, si prega di fare riferimento alla documentazione originale e ai repository collegati di seguito.
Risorse#
- Tutorial del flusso di lavoro MDMZ (YouTube)
- Documenti / Note di rilascio: Fonte del tutorial del flusso di lavoro
- Canale YouTube WhatDreamsCost
- Documenti / Note di rilascio: Canale YouTube WhatDreamsCost
- WhatDreamsCost/WhatDreamsCost-ComfyUI
- Lightricks/LTX-2.3
- Hugging Face: Lightricks/LTX-2.3
Nota: L'uso dei modelli, dei dataset e del codice di riferimento è soggetto alle rispettive licenze e termini forniti dai loro autori e manutentori.