工作流程教程#
LTX 2.3 Director 2.0 时间轴视频工作流程 for ComfyUI#
LTX 2.3 Director 2.0 是一个以时间轴为中心的 ComfyUI 工作流程,用于生成、扩展、重拍和音频感知编辑 LTX‑2.3 视频。它围绕第三方 LTX Director 2.0 时间轴节点和一个两阶段渲染管道构建,首先铺设场景,然后放大和细化。结果是一个可控的、画布风格的过程,适合希望制作更长、节拍匹配的序列而不放弃创意迭代的 AI 电影制作者。
此验证图驱动 Lightricks 的 LTX‑2.3 22B 蒸馏模型,具有专用的视频和音频 VAE,以及 LTX‑2.3 空间 x2 放大器。提示、运动指南和可选重拍直接在时间轴上编写,工作流程在第二阶段放大过程中自动保持框架稳定。它是 RunComfy 准备好并设计用于可靠的日常生产。
Comfyui LTX 2.3 Director 2.0 工作流程中的关键模型#
- Lightricks LTX‑2.3 22B Distilled (transformer‑only) – 从文本和指南中合成运动和视觉的生成视频骨干。Model card
- LTX‑2.3 Video VAE (bf16) – 编码/解码视频潜在变量以实现高效去噪和最终帧重构。Assets
- LTX‑2.3 Audio VAE (bf16) – 将时间轴音频转换为潜在变量以进行音频感知指导,并在最后恢复波形。Assets
- LTX‑2.3 Spatial Upscaler x2 v1.1 – 潜在空间超分辨率,在最后一次通过前将空间细节加倍。Assets
- LTX‑2.3 Text Projection – 将提示映射到模型的嵌入空间以实现一致的条件。Assets
- Optional Tiny VAE for previews (taeltx2_3) – 用于快速模型预览的轻量级预览 VAE。Kijai LTX2.3_comfy
时间轴工具和指南节点由 WhatDreamsCost 的自定义 ComfyUI 扩展提供。WhatDreamsCost‑ComfyUI
如何使用 Comfyui LTX 2.3 Director 2.0 工作流程#
此工作流程分为两个协调阶段运行:第 1 阶段从 LTX Director 时间轴构建连贯的基础视频和音频潜在变量;第 2 阶段放大、保持框架并细化细节;Process Video 组解码帧、恢复音频、设置 fps,并写入最终文件。
Models + Preview#
“Models + Preview”组加载 LTX‑2.3 22B 蒸馏骨干、视频和音频 VAE,以及空间 x2 放大器。ModelPreviewOverrideKJ (#10) 将骨干与一个小型预览 VAE 配对,以便在完整采样前进行提示检查。LTXDirector (#131) 是您设置持续时间、帧率、全局和每段提示、运动提示和音频设置的画布。如果计划迭代重拍,请保持 RandomNoise (#30) 种子稳定,以在编辑中保留结构。
Stage #1#
第 1 阶段将您的时间轴转换为条件和基础音视频潜在变量。LTXVConditioning (#27) 从导演接收正面条件,通过 ConditioningZeroOut (#128) 接收归零负面条件,以获得干净的基线。LTXDirectorGuide (#133) 合并指南数据、运动指南、模型和视频 VAE,以生成引导条件和初始视频潜在变量;导演的音频通过 LTXVConcatAVLatent (#29) 合并。采样器堆栈 (CFGGuider (#28), BasicScheduler (#33), KSamplerSelect (#32), SamplerCustomAdvanced (#31)) 将此 AV 潜在变量去噪为第一次结果,然后由 LTXVSeparateAVLatent (#34) 分离,以便音频潜在变量可以前进。
Stage #2 Upscale#
第 2 阶段在增加空间细节和细化的同时保持您的框架。LTXDirectorCropGuides (#55) 分析第 1 阶段的视频潜在变量和条件,以生成裁剪指南,在放大过程中保持主题稳定。LTXVLatentUpsampler (#14) 使用完整视频 VAE 将 LTX‑2.3 空间 x2 模型应用于视频潜在变量,然后 LTXDirectorGuide (#132) 将时间轴指导重新应用于更高分辨率的潜在变量,并通过 LTXVConcatAVLatent (#18) 将其与携带的音频潜在变量重新结合。第二个采样器堆栈 (CFGGuider (#17), BasicScheduler (#21), KSamplerSelect (#20), SamplerCustomAdvanced (#19)) 生成最终的 AV 潜在变量;最后的 LTXDirectorCropGuides (#54) 通过确保在解码前尊重裁剪。
Process Video#
VAEDecode (#1) 将最终视频潜在变量转换为具有高保真度视频 VAE 的帧,而 LTXVAudioVAEDecode (#24) 从音频潜在变量中恢复波形。CreateVideo (#2) 在导演广播的帧率下混合帧和音频,并通过 SaveVideo (#37) 将文件写入节点中定义的输出文件夹。如果您的最终效果与时间不一致,请调整导演的帧率或时间轴段边界并重新渲染。
Comfyui LTX 2.3 Director 2.0 工作流程中的关键节点#
LTXDirector (#131)#
工作流程的时间轴大脑。编写全局提示,放置每段提示,启用音频和运动轨道,并设置持续时间和帧率。通过指定重拍窗口和提示来启用重拍;只有该窗口会被再生,从而保存周围的上下文。启用音频感知编辑,以便让配乐或 VO 影响节奏和强调。可选的潜在输入可以在您希望一致的镜头结构时用于锚定迭代。
LTXDirectorGuide (#133)#
第 1 阶段指南,将时间轴提示、指南数据和运动提示转换为条件和种子视频潜在变量。它在基础分辨率上建立构图和运动流。在放大前,当您需要更强的叙事依从性或更清晰的阻挡时,调整它。其输出驱动第 1 阶段采样器并为下一个阶段准备裁剪指南。
LTXDirectorGuide (#132)#
在空间 x2 放大后操作的第 2 阶段指南。它在更高分辨率上重新注入相同的时间轴智能,以便细节在不破坏构图的情况下锐化。当您推动更多纹理或微运动时,在这里偏向决策,以便第 2 阶段细化而不是重写您的第 1 阶段意图。
LTXVLatentUpsampler (#14)#
在潜在空间中应用 LTX‑2.3 空间 x2 v1.1 放大器,以有效地增加细节。在最后一次去噪通道前双倍空间保真度,这通常改善边缘、小道具和排版。让它在主渲染中保持启用;仅在非常快速的预览中考虑旁路。
LTXDirectorCropGuides (#55)#
计算每段裁剪窗口,以便主题框架在放大路径中存活。无论何时您有镜头特定的构图、重新构图或信箱以在两个阶段保持一致外观时使用它。如果您看到漂移的裁剪,请重新访问您的时间轴段并重新生成指南。
SamplerCustomAdvanced (#31)#
第 1 阶段采样器,将条件转化为基础 AV 潜在变量。将其与第 1 阶段的指南和调度器配对,以平衡依从性和探索性。为了稳定的重拍,请保持相同的噪音种子;为了新的变化,请随机化种子。
SamplerCustomAdvanced (#19)#
第 2 阶段采样器,在放大后最终细化细节。它应与第 1 阶段的选择保持一致,以便细化保持忠实。当结果感觉过于平滑或过于锐利时,首先在此处调整采样器类型或调度器配对。
可选附加功能#
- 要扩展序列,请在导演时间轴上添加段并增加持续时间;工作流程将自动传播新的时间和音频。
- 对于节拍匹配的编辑,请启用音频感知编辑并放置音频段;音频 VAE 将在采样期间指导运动和重点。
- 如果您想要可重现的重拍,请保持
RandomNoise(#30) 固定;要探索替代方案,请在渲染之间更改种子。 - 预览 VAE 加速外观开发;仅依赖视频 VAE 解码以节省时间。
- 保持导演的调整大小方法为保持纵横比,以防止在放大步骤后意外拉伸。
- 输出组织由
SaveVideo(#37) 控制;为每个项目设置一个明确的文件夹,以保持迭代整洁。
链接和参考
- LTX‑2.3 模型和资产:Lightricks/LTX‑2.3
- 时间轴和指南节点:WhatDreamsCost‑ComfyUI
- 预览实用程序:ComfyUI‑KJNodes
- 小型预览 VAE:Kijai LTX2.3_comfy
致谢#
此工作流程实现并基于以下作品和资源。我们感谢 MDMZ 提供的工作流程教程,感谢 WhatDreamsCost 提供的 WhatDreamsCost-ComfyUI 节点,以及 Lightricks 提供的 LTX-2.3 模型的贡献和维护。有关权威详细信息,请参阅下文链接的原始文档和存储库。
资源#
- MDMZ 工作流程教程 (YouTube)
- 文档 / 发布说明:工作流程教程来源
- WhatDreamsCost/YouTube 频道
- 文档 / 发布说明:WhatDreamsCost YouTube 频道
- WhatDreamsCost/WhatDreamsCost-ComfyUI
- Lightricks/LTX-2.3
- Hugging Face: Lightricks/LTX-2.3
注意:使用参考的模型、数据集和代码须遵守其作者和维护者提供的各自许可证和条款。


