工作流程教程#
LTX 2.3 Director 2.0 時間軸影片工作流程 for ComfyUI#
LTX 2.3 Director 2.0 是一個以時間軸為先的 ComfyUI 工作流程,用於生成、擴展、重拍和音頻感知編輯 LTX‑2.3 影片。它圍繞第三方 LTX Director 2.0 時間軸節點和兩階段渲染管道構建,首先放下場景,然後進行升頻和精細化。結果是一個可控的畫布風格過程,非常適合希望更長、更適合節拍序列的 AI 電影製作者,而不放棄創意迭代。
這個經過驗證的圖表驅動 Lightricks 的 LTX‑2.3 22B 精煉模型,具有專用的影片和音頻 VAE 以及 LTX‑2.3 空間 x2 升頻器。提示、運動指南和可選的重拍直接在時間軸上創建,工作流程在第二階段升頻期間自動保持框架穩定。它已準備好 RunComfy,設計用於可靠的日常生產。
Comfyui LTX 2.3 Director 2.0 工作流程中的關鍵模型#
- Lightricks LTX‑2.3 22B Distilled(僅限 transformer)– 合成從文本和指南生成運動和視覺的生成影片骨幹。 Model card
- LTX‑2.3 Video VAE (bf16) – 編碼/解碼影片潛在變量以實現高效去噪和最終畫面重建。 Assets
- LTX‑2.3 Audio VAE (bf16) – 將時間軸音頻轉換為潛在變量以進行音頻感知引導,並在最後恢復波形。 Assets
- LTX‑2.3 Spatial Upscaler x2 v1.1 – 潛在空間超分辨率,在最後一次通過之前將空間細節加倍。 Assets
- LTX‑2.3 Text Projection – 將提示映射到模型的嵌入空間,以實現一致的條件。 Assets
- 可選的 Tiny VAE 用於預覽 (taeltx2_3) – 用於快速模型預覽的輕量級預覽 VAE。 Kijai LTX2.3_comfy
時間軸工具和指南節點由 WhatDreamsCost 的自定義 ComfyUI 擴展提供。 WhatDreamsCost‑ComfyUI
如何使用 Comfyui LTX 2.3 Director 2.0 工作流程#
這個工作流程在兩個協調的階段中運行:第一階段從 LTX Director 時間軸構建一致的基礎影片和音頻潛在變量;第二階段升頻,保持框架並精細化細節;Process Video 組解碼畫面,恢復音頻,設置 fps,並寫入最終文件。
模型 + 預覽#
“Models + Preview” 組加載 LTX‑2.3 22B 精煉骨幹、影片和音頻 VAE,以及空間 x2 升頻器。ModelPreviewOverrideKJ (#10) 將骨幹與一個小型預覽 VAE 配對,因此您可以在完整採樣之前擦洗和檢查提示。LTXDirector (#131) 是畫布,您可以在其中設置持續時間、幀率、全局和每段提示、運動提示和音頻設置。如果您計劃迭代重拍,請保持 RandomNoise (#30) 種子穩定,以在編輯中保持結構一致。
第一階段#
第一階段將您的時間軸轉換為條件和基礎音頻-影片潛在變量。LTXVConditioning (#27) 從導演那裡接收正向條件,並通過 ConditioningZeroOut (#128) 接收歸零的負向條件,形成一個乾淨的基線。LTXDirectorGuide (#133) 合併指南數據、運動指南、模型和影片 VAE 以生成引導條件和初始影片潛在變量;音頻從導演那裡通過 LTXVConcatAVLatent (#29) 合併。取樣器堆棧(CFGGuider (#28), BasicScheduler (#33), KSamplerSelect (#32), SamplerCustomAdvanced (#31))將這個 AV 潛在變量去噪成第一通過結果,然後通過 LTXVSeparateAVLatent (#34) 分裂,以便音頻潛在變量可以被帶到前進。
第二階段升頻#
第二階段在添加空間細節和精細化的同時保持您的框架。LTXDirectorCropGuides (#55) 分析第一階段的影片潛在變量和條件以生成裁剪指南,保持主題在升頻期間穩定。LTXVLatentUpsampler (#14) 使用完整的影片 VAE 將 LTX‑2.3 空間 x2 模型應用於影片潛在變量,然後 LTXDirectorGuide (#132) 將時間軸引導重新應用到更高分辨率的潛在變量上,並通過 LTXVConcatAVLatent (#18) 與帶有的音頻潛在變量重新聯合。第二個取樣器堆棧(CFGGuider (#17), BasicScheduler (#21), KSamplerSelect (#20), SamplerCustomAdvanced (#19))生成最終的 AV 潛在變量;最後一次 LTXDirectorCropGuides (#54) 通過確保裁剪在解碼前被尊重。
處理影片#
VAEDecode (#1) 使用高保真影片 VAE 將最終影片潛在變量轉換為畫面,而 LTXVAudioVAEDecode (#24) 則從音頻潛在變量中恢復波形。CreateVideo (#2) 將畫面和音頻以導演廣播的幀率混合,SaveVideo (#37) 則將文件寫入節點中定義的輸出文件夾。如果您的最終外觀與時間不對齊,請調整導演的幀率或時間軸段邊界並重新渲染。
Comfyui LTX 2.3 Director 2.0 工作流程中的關鍵節點#
LTXDirector (#131)#
工作流程的時間軸大腦。創建全局提示,放置每段提示,啟用音頻和運動軌道,並設置持續時間和幀率。通過指定重拍窗口和提示來使用重拍;只有該窗口將被重新生成,保留周圍的上下文。啟用音頻感知編輯,讓音軌或 VO 影響節奏和重點。當您希望保持一致的鏡頭結構時,可以使用可選的潛在輸入來錨定迭代。
LTXDirectorGuide (#133)#
第一階段指南,將時間軸提示、指南數據和運動提示轉換為條件和種子影片潛在變量。它在基礎分辨率下建立構圖和運動流。在升頻之前,當您需要更強的敘事依從性或更清晰的封鎖時,請調整它。其輸出驅動第一階段取樣器並準備下一階段的裁剪指南。
LTXDirectorGuide (#132)#
第二階段指南,在空間 x2 升頻後運行。它在更高分辨率下重新注入相同的時間軸智能,這樣細節就會在不破壞構圖的情況下變得更清晰。當您推動更多紋理或微運動時,請在這裡偏向決策,以便第二階段精細化而不是重寫您的第一階段意圖。
LTXVLatentUpsampler (#14)#
在潛在空間中應用 LTX‑2.3 空間 x2 v1.1 升頻器,以有效地添加細節。使用它在最後的去噪之前將空間保真度加倍,這通常會改善邊緣、小道具和排版。在主渲染時保持啟用;僅在非常快速的預視中考慮旁路。
LTXDirectorCropGuides (#55)#
計算每段裁剪窗口,以便主題框架在升頻路徑中倖存。無論何時遇到鏡頭特定的構圖、重構或信箱,請使用它以保持兩個階段的一致外觀。如果您看到漂移的裁剪,請重新訪問您的時間軸段並重新生成指南。
SamplerCustomAdvanced (#31)#
第一階段取樣器,將條件轉換為基礎 AV 潛在變量。將其與第一階段引導器和調度器配對,以平衡依從性和探索。為了穩定的重拍,保持相同的噪聲種子;為了新的變化,隨機化種子。
SamplerCustomAdvanced (#19)#
第二階段取樣器,在升頻後完成細節。它應該與第一階段的選擇保持一致,以便精細化保持忠實。當結果感覺過於平滑或過於銳利時,首先在這裡調整取樣器類型或調度器配對。
可選附加項#
- 要延長序列,請在導演時間軸上添加段並增加持續時間;工作流程將自動傳播新的時間和音頻。
- 對於節拍匹配的編輯,啟用音頻感知編輯並放置音頻段;音頻 VAE 將在取樣期間引導運動和重點。
- 如果您想要可重現的重拍,請保持
RandomNoise(#30) 固定;要探索替代方案,請在渲染之間更改種子。 - 預覽 VAE 加快了外觀開發;僅在最終使用影片 VAE 解碼以節省時間。
- 保持導演的調整方法在維持比例,以防止升頻步驟後的意外拉伸。
- 輸出組織在
SaveVideo(#37) 中控制;為每個項目設置一個清晰的文件夾,以保持迭代整潔。
鏈接和參考
- LTX‑2.3 模型和資產:Lightricks/LTX‑2.3
- 時間軸和指南節點:WhatDreamsCost‑ComfyUI
- 預覽工具:ComfyUI‑KJNodes
- 小型預覽 VAE:Kijai LTX2.3_comfy
致謝#
這個工作流程實施並建立在以下作品和資源的基礎上。我們對 MDMZ 的工作流程教程,WhatDreamsCost 的 WhatDreamsCost-ComfyUI 節點,和 Lightricks 的 LTX-2.3 模型的貢獻和維護表示感謝。欲了解權威詳情,請參閱下方鏈接的原始文檔和存儲庫。
資源#
- MDMZ 工作流程教程 (YouTube)
- 文件 / 發布說明:工作流程教程源
- WhatDreamsCost/YouTube 頻道
- 文件 / 發布說明:WhatDreamsCost YouTube 頻道
- WhatDreamsCost/WhatDreamsCost-ComfyUI
- Lightricks/LTX-2.3
- Hugging Face: Lightricks/LTX-2.3
注意:使用參考的模型、數據集和代碼需遵守其作者和維護者提供的相應許可和條款。

