Tutorial de Flujo de Trabajo#
Flujo de trabajo de video en línea de tiempo LTX 2.3 Director 2.0 para ComfyUI#
LTX 2.3 Director 2.0 es un flujo de trabajo ComfyUI enfocado en la línea de tiempo para generar, extender, retomar y editar videos LTX‑2.3 conscientes de audio. Está construido alrededor del nodo de línea de tiempo de terceros LTX Director 2.0 y una canalización de renderizado de dos etapas que primero establece la escena y luego escala y refina. El resultado es un proceso controlable, estilo lienzo, ideal para cineastas de IA que desean secuencias más largas y sincronizadas sin renunciar a la iteración creativa.
Este gráfico verificado impulsa el modelo destilado LTX‑2.3 22B de Lightricks con VAEs de video y audio dedicados además del escalador espacial x2 LTX‑2.3. Los avisos, guías de movimiento y retomas opcionales se crean directamente en la línea de tiempo, y el flujo de trabajo mantiene automáticamente el encuadre estable durante la ampliación de la Etapa 2. Está listo para RunComfy y diseñado para una producción diaria confiable.
Modelos clave en el flujo de trabajo Comfyui LTX 2.3 Director 2.0#
- Lightricks LTX‑2.3 22B Distillado (solo transformador) – la columna vertebral generativa de video que sintetiza movimiento y visuales a partir de texto y guías. Model card
- LTX‑2.3 Video VAE (bf16) – codifica/decodifica latentes de video para una desaturación eficiente y reconstrucción final del fotograma. Assets
- LTX‑2.3 Audio VAE (bf16) – convierte el audio de la línea de tiempo en latentes para orientación consciente de audio y restaura la forma de onda al final. Assets
- LTX‑2.3 Spatial Upscaler x2 v1.1 – superresolución en el espacio latente que duplica el detalle espacial antes de la pasada final. Assets
- LTX‑2.3 Text Projection – mapea los avisos al espacio de incrustación del modelo para una condición consistente. Assets
- Tiny VAE opcional para previsualizaciones (taeltx2_3) – VAE de previsualización ligero utilizado para previsualizaciones rápidas del modelo. Kijai LTX2.3_comfy
Las herramientas de línea de tiempo y nodos de guía son proporcionadas por la extensión personalizada ComfyUI de WhatDreamsCost. WhatDreamsCost‑ComfyUI
Cómo usar el flujo de trabajo Comfyui LTX 2.3 Director 2.0#
Este flujo de trabajo se ejecuta en dos etapas coordinadas: la Etapa 1 construye un video base coherente y un latente de audio a partir de la línea de tiempo de LTX Director; la Etapa 2 escala, preserva el encuadre y refina el detalle; el grupo Process Video decodifica fotogramas, restaura audio, establece fps y escribe el archivo final.
Modelos + Previsualización#
El grupo "Models + Preview" carga la columna vertebral destilada LTX‑2.3 22B, VAEs de video y audio, y el escalador espacial x2. ModelPreviewOverrideKJ (#10) empareja la columna vertebral con un VAE de previsualización pequeño para que puedas revisar y verificar avisos antes del muestreo completo. LTXDirector (#131) es el lienzo donde estableces duración, tasa de fotogramas, avisos globales y por segmento, señales de movimiento y configuraciones de audio. Si planeas retomas iterativas, mantén la semilla RandomNoise (#30) constante para retener la estructura a través de las ediciones.
Etapa #1#
La Etapa 1 convierte tu línea de tiempo en condicionamiento y un latente base de audio-video. LTXVConditioning (#27) recibe condicionamiento positivo del director y un negativo anulado a través de ConditioningZeroOut (#128) para una línea base limpia. LTXDirectorGuide (#133) fusiona datos de guía, guías de movimiento, el modelo y el VAE de video para producir un condicionamiento guiado y un latente de video inicial; el audio del director se combina a través de LTXVConcatAVLatent (#29). La pila de muestreo (CFGGuider (#28), BasicScheduler (#33), KSamplerSelect (#32), SamplerCustomAdvanced (#31)) desaturiza este latente AV en un resultado de primera pasada, que luego se divide por LTXVSeparateAVLatent (#34) para que el latente de audio pueda llevarse adelante.
Etapa #2 Escalado#
La Etapa 2 preserva tu encuadre mientras añade detalle espacial y refinamiento. LTXDirectorCropGuides (#55) analiza el latente de video de la Etapa 1 y el condicionamiento para producir guías de recorte que mantienen estables los sujetos durante el escalado. LTXVLatentUpsampler (#14) aplica el modelo espacial x2 LTX‑2.3 al latente de video usando el VAE de video completo, luego LTXDirectorGuide (#132) reaplica la guía de la línea de tiempo al latente de mayor resolución y lo reúne con el latente de audio llevado a través de LTXVConcatAVLatent (#18). La segunda pila de muestreo (CFGGuider (#17), BasicScheduler (#21), KSamplerSelect (#20), SamplerCustomAdvanced (#19)) produce el latente AV final; un último pase de LTXDirectorCropGuides (#54) asegura que se respeten los recortes antes de decodificar.
Procesar Video#
VAEDecode (#1) convierte el latente de video final en fotogramas con el VAE de video de alta fidelidad, mientras LTXVAudioVAEDecode (#24) restaura la forma de onda del latente de audio. CreateVideo (#2) mezcla fotogramas y audio a la tasa de fotogramas transmitida por el director, y SaveVideo (#37) escribe el archivo en la carpeta de salida definida en el nodo. Si tu resultado final parece desalineado con el tiempo, ajusta la tasa de fotogramas del director o los límites del segmento de la línea de tiempo y vuelve a renderizar.
Nodos clave en el flujo de trabajo Comfyui LTX 2.3 Director 2.0#
LTXDirector (#131)#
El cerebro de la línea de tiempo del flujo de trabajo. Crea el aviso global, coloca avisos por segmento, habilita pistas de audio y movimiento, y establece duración y tasa de fotogramas. Usa retomas especificando la ventana de retoma y el aviso; solo esa ventana será regenerada, preservando el contexto circundante. Habilita la edición consciente de audio para que la banda sonora o VO influya en el ritmo y el énfasis. La entrada latente opcional puede usarse para anclar iteraciones cuando deseas una estructura de toma consistente.
LTXDirectorGuide (#133)#
Guía de la Etapa 1 que convierte los avisos de la línea de tiempo, datos de guía y señales de movimiento en condicionamiento y un latente de video inicial. Establece la composición y el flujo de movimiento a resolución base. Ajústalo cuando necesites mayor adherencia narrativa o bloqueos más claros antes del escalado. Sus salidas impulsan el muestreador de la Etapa 1 y preparan la guía de recorte para la siguiente etapa.
LTXDirectorGuide (#132)#
Guía de la Etapa 2 que opera después del escalado espacial x2. Reinyecta la misma inteligencia de línea de tiempo a mayor resolución para que los detalles se afiancen sin romper la composición. Cuando buscas más textura o micro-movimiento, inclina las decisiones aquí para que la Etapa 2 refine en lugar de reescribir tu intención de la Etapa 1.
LTXVLatentUpsampler (#14)#
Aplica el escalador espacial x2 v1.1 LTX‑2.3 en el espacio latente para añadir detalle eficientemente. Úsalo para duplicar la fidelidad espacial antes de la pasada final de desaturación, lo que típicamente mejora bordes, pequeños objetos y tipografía. Manténlo activado para renders maestros; considera omitirlo solo para previsualizaciones muy rápidas.
LTXDirectorCropGuides (#55)#
Calcula ventanas de recorte por segmento para que el encuadre del sujeto sobreviva al camino de escalado. Úsalo siempre que tengas composiciones específicas de toma, reencuadres o letterboxing para mantener una apariencia consistente a lo largo de ambas etapas. Si ves recortes que se desplazan, revisa tus segmentos de línea de tiempo y regenera las guías.
SamplerCustomAdvanced (#31)#
Muestreador de la Etapa 1 que traduce el condicionamiento en el latente base AV. Emparejalo con el guiador y programador de la Etapa 1 para equilibrar adherencia y exploración. Para retomas estables, mantén la misma semilla de ruido; para nuevas variaciones, aleatoriza la semilla.
SamplerCustomAdvanced (#19)#
Muestreador de la Etapa 2 que finaliza el detalle después del escalado. Debe permanecer armonizado con las elecciones de la Etapa 1 para que el refinamiento se mantenga fiel. Cuando los resultados parecen demasiado suavizados o demasiado afilados, ajusta el tipo de muestreador o el emparejamiento de programador aquí primero.
Extras opcionales#
- Para extender una secuencia, añade segmentos en la línea de tiempo del director y aumenta la duración; el flujo de trabajo propagará automáticamente la nueva sincronización y audio.
- Para ediciones sincronizadas al ritmo, habilita la edición consciente de audio y coloca segmentos de audio; el VAE de audio guiará el movimiento y el énfasis durante el muestreo.
- Si deseas retomas reproducibles, mantén
RandomNoise(#30) fijo; para explorar alternativas, cambia la semilla entre renderizaciones. - El VAE de previsualización acelera el desarrollo visual; confía en la decodificación del VAE de video solo para finales para ahorrar tiempo.
- Mantén el método de redimensionamiento del director en mantener-aspecto para evitar estiramientos no deseados después del paso de escalado.
- La organización de la salida se controla en
SaveVideo(#37); establece una carpeta clara por proyecto para mantener las iteraciones ordenadas.
Enlaces y referencias
- Modelos y recursos LTX‑2.3: Lightricks/LTX‑2.3
- Nodos de línea de tiempo y guía: WhatDreamsCost‑ComfyUI
- Utilidades de previsualización: ComfyUI‑KJNodes
- Tiny preview VAE: Kijai LTX2.3_comfy
Reconocimientos#
Este flujo de trabajo implementa y se basa en los siguientes trabajos y recursos. Agradecemos a MDMZ por el tutorial del flujo de trabajo, a WhatDreamsCost por los nodos WhatDreamsCost-ComfyUI, y a Lightricks por el modelo LTX-2.3 por sus contribuciones y mantenimiento. Para detalles autorizados, consulte la documentación original y los repositorios enlazados a continuación.
Recursos#
- Tutorial de flujo de trabajo MDMZ (YouTube)
- Documentos / Notas de lanzamiento: Fuente del tutorial de flujo de trabajo
- Canal de YouTube WhatDreamsCost
- Documentos / Notas de lanzamiento: Canal de YouTube WhatDreamsCost
- WhatDreamsCost/WhatDreamsCost-ComfyUI
- Lightricks/LTX-2.3
- Hugging Face: Lightricks/LTX-2.3
Nota: El uso de los modelos, conjuntos de datos y código referenciados está sujeto a las respectivas licencias y términos proporcionados por sus autores y mantenedores.
