워크플로우 튜토리얼#
ComfyUI용 LTX 2.3 Director 2.0 타임라인 비디오 워크플로우#
LTX 2.3 Director 2.0은 LTX‑2.3 비디오의 생성, 확장, 재촬영 및 오디오 인식 편집을 위한 타임라인 우선 ComfyUI 워크플로우입니다. 이는 타사 LTX Director 2.0 타임라인 노드와 장면을 먼저 배치한 후 업스케일링 및 정제를 수행하는 2단계 렌더 파이프라인을 중심으로 구축되었습니다. 결과는 더 길고 비트가 맞는 시퀀스를 원하는 AI 영화 제작자에게 이상적인 제어 가능한 캔버스 스타일의 프로세스를 제공합니다.
이 검증된 그래프는 Lightricks의 LTX‑2.3 22B 증류 모델을 전용 비디오 및 오디오 VAE와 LTX‑2.3 공간 x2 업스케일러로 구동합니다. 프롬프트, 모션 가이드, 선택적 재촬영은 타임라인에 직접 작성되며, 워크플로우는 2단계 업스케일 동안 프레임을 자동으로 안정적으로 유지합니다. 이는 RunComfy‑준비가 되어 있으며 신뢰할 수 있는 일일 제작을 위해 설계되었습니다.
Comfyui LTX 2.3 Director 2.0 워크플로우의 주요 모델#
- Lightricks LTX‑2.3 22B Distilled (transformer‑only) – 텍스트와 가이드에서 모션과 비주얼을 합성하는 생성 비디오 백본. 모델 카드
- LTX‑2.3 Video VAE (bf16) – 효율적인 디노이징과 최종 프레임 재구성을 위한 비디오 잠재 인코딩/디코딩. Assets
- LTX‑2.3 Audio VAE (bf16) – 타임라인 오디오를 오디오 인식 가이던스를 위한 잠재로 변환하고 끝에서 파형을 복원합니다. Assets
- LTX‑2.3 Spatial Upscaler x2 v1.1 – 최종 패스를 앞두고 공간 세부 정보를 두 배로 늘리는 잠재 공간 초해상도. Assets
- LTX‑2.3 Text Projection – 일관된 조건을 위해 모델의 임베딩 공간에 프롬프트를 매핑합니다. Assets
- Optional Tiny VAE for previews (taeltx2_3) – 빠른 모델 미리보기를 위한 경량 미리보기 VAE. Kijai LTX2.3_comfy
타임라인 도구와 가이드 노드는 WhatDreamsCost의 사용자 정의 ComfyUI 확장 프로그램에서 제공됩니다. WhatDreamsCost‑ComfyUI
Comfyui LTX 2.3 Director 2.0 워크플로우 사용 방법#
이 워크플로우는 두 가지 단계로 조정하여 실행됩니다: 1단계는 LTX Director 타임라인에서 일관된 기본 비디오 및 오디오 잠재를 구축합니다; 2단계는 업스케일링, 프레임 유지 및 세부 사항을 정제합니다; Process Video 그룹은 프레임을 디코딩하고, 오디오를 복원하고, fps를 설정하고, 최종 파일을 작성합니다.
모델 + 미리보기#
“모델 + 미리보기” 그룹은 LTX‑2.3 22B 증류 백본, 비디오 및 오디오 VAE, 공간 x2 업스케일러를 로드합니다. ModelPreviewOverrideKJ (#10)은 백본과 작은 미리보기 VAE를 연결하여 전체 샘플링 전에 프롬프트를 스크러빙하고 확인할 수 있습니다. LTXDirector (#131)는 지속 시간, 프레임 속도, 글로벌 및 세그먼트별 프롬프트, 모션 큐 및 오디오 설정을 설정하는 캔버스입니다. 반복적인 재촬영을 계획한다면 RandomNoise (#30) 시드를 고정하여 편집 간 구조를 유지하세요.
1단계#
1단계는 타임라인을 조건화 및 기본 오디오-비디오 잠재로 변환합니다. LTXVConditioning (#27)은 감독으로부터 긍정적인 조건화를 받고, ConditioningZeroOut (#128)을 통해 0으로 설정된 부정적인 조건화를 받아 깨끗한 기준선을 만듭니다. LTXDirectorGuide (#133)는 가이드 데이터, 모션 가이드, 모델 및 비디오 VAE를 합쳐 조건화와 초기 비디오 잠재를 생성합니다; 감독의 오디오는 LTXVConcatAVLatent (#29)를 통해 결합됩니다. 샘플러 스택(CFGGuider (#28), BasicScheduler (#33), KSamplerSelect (#32), SamplerCustomAdvanced (#31))은 이 AV 잠재를 첫 번째 결과로 디노이즈하며, 이는 LTXVSeparateAVLatent (#34)에 의해 분할되어 오디오 잠재가 앞으로 전달될 수 있습니다.
2단계 업스케일#
2단계는 프레임을 유지하면서 공간 세부 사항과 정제를 추가합니다. LTXDirectorCropGuides (#55)는 1단계의 비디오 잠재와 조건화를 분석하여 업스케일 동안 피사체를 안정적으로 유지하는 크롭 가이드를 생성합니다. LTXVLatentUpsampler (#14)는 전체 비디오 VAE를 사용하여 비디오 잠재에 LTX‑2.3 공간 x2 모델을 적용하고, LTXDirectorGuide (#132)는 타임라인 가이드를 고해상도 잠재에 다시 적용하여 캐리드 오디오 잠재와 재결합합니다. 두 번째 샘플러 스택(CFGGuider (#17), BasicScheduler (#21), KSamplerSelect (#20), SamplerCustomAdvanced (#19))은 최종 AV 잠재를 생성합니다; 마지막 LTXDirectorCropGuides (#54) 패스는 디코딩 전에 크롭이 존중되도록 보장합니다.
비디오 처리#
VAEDecode (#1)은 최종 비디오 잠재를 고품질 비디오 VAE로 프레임으로 변환하고, LTXVAudioVAEDecode (#24)는 오디오 잠재에서 파형을 복원합니다. CreateVideo (#2)는 프레임 및 오디오를 감독이 방송한 프레임 속도로 믹스하고, SaveVideo (#37)는 노드에 정의된 출력 폴더에 파일을 저장합니다. 최종 결과가 타이밍과 맞지 않으면 감독의 프레임 속도나 타임라인 세그먼트 경계를 조정하고 다시 렌더링하세요.
Comfyui LTX 2.3 Director 2.0 워크플로우의 주요 노드#
LTXDirector (#131)#
워크플로우의 타임라인 두뇌입니다. 글로벌 프롬프트를 작성하고, 세그먼트별 프롬프트를 배치하고, 오디오 및 모션 트랙을 활성화하며, 지속 시간과 프레임 속도를 설정합니다. 재촬영 창과 프롬프트를 지정하여 재촬영을 사용하고, 해당 창만 재생성되어 주변 컨텍스트를 보존합니다. 오디오 인식 편집을 활성화하여 사운드트랙이나 VO가 속도와 강조를 결정하도록 하세요. 일관된 샷 구조를 원할 때 반복을 고정할 수 있는 선택적 잠재 입력을 사용할 수 있습니다.
LTXDirectorGuide (#133)#
1단계 가이드로 타임라인 프롬프트, 가이드 데이터, 모션 큐를 조건화와 시드 비디오 잠재로 변환합니다. 기본 해상도에서 구성과 모션 흐름을 설정합니다. 업스케일 전에 더 강한 내러티브 준수나 명확한 차단이 필요할 때 조정하세요. 출력은 1단계 샘플러를 구동하고 다음 단계의 크롭 가이던스를 준비합니다.
LTXDirectorGuide (#132)#
공간 x2 업스케일 후 작동하는 2단계 가이드입니다. 동일한 타임라인 인텔리전스를 더 높은 해상도에서 다시 주입하여 세부 사항이 조합을 깨지 않고 선명해지도록 합니다. 더 많은 텍스처나 미세 모션을 추구할 때 여기에서 결정에 편향을 주어 2단계가 1단계 의도를 다시 쓰지 않고 정제하도록 하세요.
LTXVLatentUpsampler (#14)#
잠재 공간에서 LTX‑2.3 공간 x2 v1.1 업스케일러를 적용하여 효율적으로 세부 사항을 추가합니다. 최종 디노이징 패스 전에 공간 충실도를 두 배로 늘리는 데 사용하여 일반적으로 가장자리, 작은 소품 및 타이포그래피를 개선합니다. 마스터 렌더링을 위해 활성화된 상태로 두세요; 매우 빠른 예측을 위해서만 우회 고려하세요.
LTXDirectorCropGuides (#55)#
세그먼트별 크롭 창을 계산하여 피사체 프레임이 업스케일 경로를 통해 생존하도록 합니다. 특정 샷 구성이 있거나 리프레임 또는 레터박싱이 필요한 경우 두 단계 모두에서 일관된 외관을 유지하려면 사용하세요. 드리프트하는 크롭이 보이면 타임라인 세그먼트를 다시 방문하고 가이드를 재생성하세요.
SamplerCustomAdvanced (#31)#
1단계 샘플러로 조건화를 기본 AV 잠재로 변환합니다. 1단계 가이드 및 스케줄러와 짝을 이루어 준수와 탐색의 균형을 맞춥니다. 안정적인 재촬영을 위해 동일한 노이즈 시드를 유지하세요; 새로운 변형을 위해 시드를 무작위화하세요.
SamplerCustomAdvanced (#19)#
업스케일 후 세부 사항을 마무리하는 2단계 샘플러입니다. 1단계 선택과 조화를 유지하여 정제가 충실하게 유지되도록 해야 합니다. 결과가 너무 부드럽거나 너무 날카롭게 느껴질 때는 여기에서 샘플러 유형이나 스케줄러 짝을 먼저 조정하세요.
선택적 추가 기능#
- 시퀀스를 확장하려면 감독 타임라인에 세그먼트를 추가하고 지속 시간을 늘리세요; 워크플로우는 새로운 타이밍과 오디오를 자동으로 전파합니다.
- 비트가 맞는 편집을 위해 오디오 인식 편집을 활성화하고 오디오 세그먼트를 배치하세요; 오디오 VAE는 샘플링 중 모션과 강조를 안내합니다.
- 재현 가능한 재촬영을 원한다면
RandomNoise(#30)를 고정하세요; 대안을 탐색하려면 렌더링 간 시드를 변경하세요. - 미리보기 VAE는 룩 개발 속도를 높입니다; 최종 결정에서는 비디오 VAE 디코딩만을 사용하여 시간을 절약하세요.
- 업스케일 단계 후 의도치 않은 스트레칭을 방지하려면 감독의 리사이즈 방법을 유지-비율로 설정하세요.
- 출력 구성은
SaveVideo(#37)에서 제어됩니다; 프로젝트별로 명확한 폴더를 설정하여 반복을 깔끔하게 유지하세요.
링크 및 참조
- LTX‑2.3 모델 및 자산: Lightricks/LTX‑2.3
- 타임라인 및 가이드 노드: WhatDreamsCost‑ComfyUI
- 미리보기 유틸리티: ComfyUI‑KJNodes
- 작은 미리보기 VAE: Kijai LTX2.3_comfy
감사의 말#
이 워크플로우는 다음 작품 및 리소스를 구현하고 확장합니다. 워크플로우 튜토리얼을 위한 MDMZ, WhatDreamsCost-ComfyUI 노드를 위한 WhatDreamsCost, LTX-2.3 모델을 위한 Lightricks의 기여와 유지보수에 대해 감사드립니다. 권위 있는 세부 사항은 아래에 링크된 원본 문서 및 리포지토리를 참조하세요.
리소스#
- MDMZ 워크플로우 튜토리얼 (YouTube)
- 문서 / 릴리스 노트: 워크플로우 튜토리얼 소스
- WhatDreamsCost/YouTube 채널
- 문서 / 릴리스 노트: WhatDreamsCost YouTube 채널
- WhatDreamsCost/WhatDreamsCost-ComfyUI
- Lightricks/LTX-2.3
- Hugging Face: Lightricks/LTX-2.3
참고: 참조된 모델, 데이터세트 및 코드는 저자 및 유지보수자가 제공한 해당 라이선스 및 조건에 따라 사용됩니다.