ComfyUI>워크플로우>텍스트 및 이미지에서 비디오로의 PAN2 ComfyUI 워크플로우

텍스트 및 이미지에서 비디오로의 PAN2 ComfyUI 워크플로우

Workflow Name: RunComfy/PAN2-ComfyUI
Workflow ID: 0000...1566
PAN2로 장면 아이디어를 짧은 비디오로 변환하세요. 텍스트 또는 첫 프레임 이미지에서 시작합니다. 로컬 프롬프트 작성기로 간단한 프롬프트를 확장합니다. 시간에 맞춘 캡션으로 주제 동작과 카메라 움직임을 안내합니다. 하나의 캔버스에서 입력 모드를 전환할 수 있습니다.

PAN2 ComfyUI Workflow Workflow

PAN2 ComfyUI Workflow - T2V I2V with Prompt Writer
Want to run this workflow?
  • Fully operational workflows
  • No missing nodes or models
  • No manual setups required
  • Features stunning visuals

PAN2 ComfyUI Workflow Examples

PAN2 ComfyUI 워크플로우: 로컬 프롬프트 작성기를 사용하여 텍스트 또는 이미지를 비디오로 변환#

이 PAN2 ComfyUI 워크플로우는 짧은 장면 아이디어나 첫 프레임 이미지를 일관된 비디오로 변환합니다. 생성에는 PAN 2 월드 모델을 실행하고, 로컬 프롬프트 작성기를 추가하여 간단한 개념을 주제, 동작 및 카메라 움직임을 포함한 시간에 맞춰 캡션으로 확장합니다.

이 워크플로우는 긴 프롬프트를 손으로 작성하지 않고도 신뢰할 수 있는 움직임, 일관된 조명, 안정적인 기하학을 원하는 창작자를 위해 설계되었습니다. 텍스트에서 비디오로와 이미지에서 비디오로는 동일한 캔버스에서 실행되며, 해상도 및 지속 시간 제어 세트를 공유하고 MP4로 직접 내보냅니다.

Comfyui PAN2 ComfyUI 워크플로우의 주요 모델#

  • IFM PAN 2 월드 모델. 텍스트 또는 이미지 조건으로 시간적으로 일관된 비디오를 예측하는 핵심 생성기로, 안정적인 월드 모델링과 카메라 움직임에 중점을 둡니다. 출처: IFM/PAN2.
  • ComfyUI용 PAN 2 가중치. ComfyUI 로더 및 샘플러와 호환되는 PAN2 가중치의 유지 관리 패키지로, 이 그래프에서 빠른 설정을 가능하게 합니다. 출처: Comfy-Org/PAN2.
  • Hunyuan 스타일 잠재 비디오 VAE. 비디오 파이프라인에서 사용되는 압축된 잠재 공간에서 프레임을 인코딩 및 디코딩하는 비디오 VAE로, 다중 초 클립의 속도와 메모리 사용을 개선합니다. 배경: Tencent/HunyuanVideo.
  • PAN2 호환 텍스트 인코더. 샘플러에 대한 긍정적 및 부정적 조건으로 프롬프트 작성기의 시간에 맞춘 캡션을 변환하는 Qwen 계열 인코더로, PAN2 가중치와 함께 패키징되어 있습니다.

Comfyui PAN2 ComfyUI 워크플로우 사용 방법#

한눈에 보면 그래프는 샘플링 전에 병합되는 두 개의 병행 경로를 제공합니다. Text2Video 또는 Image2Video 중 하나를 선택하고 짧은 아이디어를 작성하고 해상도와 지속 시간을 한 번 설정한 다음 프롬프트 작성기가 PAN2에 대한 구조적 조건을 생성하도록 합니다. 최종 샘플러는 잠재 프레임을 렌더링하고 MP4로 디코딩 및 결합합니다.

Image2Video 그룹#

참조 스틸로 외관을 고정하고 싶을 때 이 경로를 사용하세요. LoadImage (#32)에서 첫 프레임을 로드합니다. ResizeImageMaskNode (#33)에 의해 ResolutionSelector (#21)에 따라 크기가 조정된 후 Wan22ImageToVideoLatent (#31)에서 시간적 잠재로 변환됩니다. 지속 시간은 공유된 초 컨트롤에서 제공되며 프레임 수로 자동 변환됩니다. 그런 다음 이 잠재는 병합 지점으로 흐르며, PAN2 ComfyUI 워크플로우의 나머지 부분에서 샘플링, 디코딩 및 비디오 내보내기가 가능합니다.

Text2Video 그룹#

텍스트에서 전체 장면을 생성하려면 이를 선택하세요. EmptyHunyuanLatentVideo (#14)는 Image2Video와 동일한 해상도 및 지속 시간 제어를 기반으로 깨끗한 시간적 잠재를 만듭니다. 장면의 움직임과 템포는 프롬프트 작성기의 캡션에서 나오므로 수동 키프레임 없이 카메라 움직임과 주제 동작을 제작할 수 있습니다. 이 경로는 Image2Video와 사용된 동일한 병합 지점으로 피드되고 샘플링 및 내보내기를 계속합니다.

공유 코어: 프롬프트 작성기 및 조건화#

PAN2PromptWriter (#22)에 한 문장에서 세 문장까지의 장면 아이디어를 작성하세요. 노드는 이를 시간에 맞춘 캡션과 일반적인 아티팩트를 억제하는 부정적 라이브러리로 확장합니다. 두 출력은 PreviewAny (#9) 및 PreviewAny (#24)에서 미리보기가 가능하므로 필요에 따라 텍스트를 복사하거나 수정할 수 있습니다. CLIPTextEncode (#10) 및 CLIPTextEncode (#11)는 이러한 문자열을 모델에 대한 긍정적 및 부정적 조건으로 변환합니다. 프롬프트를 최소화할 수 있습니다. 프롬프트 작성기가 주제 동작, 카메라 움직임 및 연속성 신호를 자동으로 추가하기 때문입니다.

샘플링, 디코딩 및 내보내기#

모델 경로는 PAN2를 로드하고 효율적인 주의를 구성한 다음 KSampler (#7)이 조건과 활성 잠재 경로를 사용하여 잠재 비디오를 생성합니다. VAEDecode (#12)는 잠재를 프레임으로 다시 변환합니다. VHS_VideoCombine (#13)은 이러한 프레임을 선택한 프레임 속도와 품질로 MP4로 조립하고 재현성을 위해 워크플로우 메타데이터를 임베드합니다.

Comfyui PAN2 ComfyUI 워크플로우의 주요 노드#

PAN2PromptWriter (#22)#

짧고 자연스러운 설명을 비디오에 맞춘 시간에 맞춘 캡션으로 확장하고 강력한 부정 프롬프트를 추가합니다. prompt를 조정하여 주제, 환경 및 카메라 의도를 일반 언어로 설명합니다. duration을 사용하여 전체 클립 길이를 목표로 합니다. 샷 간의 창의적 변화를 더하거나 줄이려면 temperature 또는 top_p를 조정하세요. 반복 가능한 스토리텔링 비트를 위해 seed를 고정하세요.

ResolutionSelector (#21)#

둘 다 경로에 대한 작동 너비와 높이를 가로 세로 비율과 메가픽셀 목표에서 설정합니다. 먼저 비율을 선택한 다음 픽셀 수를 높이거나 낮춰 품질과 속도를 균형 있게 합니다. Image2Video와 Text2Video를 동일한 선택기에 유지하면 모드를 전환할 때 불일치하는 스케일을 방지할 수 있습니다.

Wan22ImageToVideoLatent (#31)#

첫 이미지를 Image2Video 경로에 대한 시간적으로 일관된 잠재 시퀀스로 변환합니다. 잘 조명된 프레임을 제공하여 의도한 비율에 이미 맞춰진 프레임을 제공하여 크롭의 놀라움을 피하세요. 길이는 자동으로 제공되며, 공유된 초 컨트롤을 변경하여 다시 방문할 수 있습니다.

EmptyHunyuanLatentVideo (#14)#

선택한 해상도와 지속 시간을 사용하여 Text2Video 경로에 대한 빈 시간적 잠재를 만듭니다. 이는 프롬프트 작성기의 지침에서 순수하게 움직임을 발명하는 가장 깨끗한 방법입니다. 더 긴 클립의 경우, 드리프트를 최소화하기 위해 여러 짧은 테이크를 생성한 다음 함께 편집하는 것을 고려하세요.

Any Switch (rgthree) (#35)#

어떤 잠재 경로가 생성을 구동하는지를 선택합니다. 참조 프레임에서 엄격한 시각적 연속성을 원할 때 Image2Video 잠재를 선택하거나, 완전한 텍스트 기반 비디오를 위해 빈 잠재로 전환하세요. 그래프를 다시 배선하지 않고 실행 간에 안전하게 토글할 수 있습니다.

KSampler (#7)#

병합된 모델과 조건을 사용하여 시간에 따른 핵심 디노이징 단계를 수행합니다. 품질 대 속도를 위해 steps를 조정하고, 프롬프트 준수 대 자연주의를 위해 cfg를 조정하고, Image2Video 잠재에서 세밀하게 조정할 때 denoise를 조정하세요. scheduler와 sampler_name을 합리적으로 페어링하세요. 여기서 작은 변화는 움직임의 부드러움을 눈에 띄게 바꿀 수 있습니다.

VHS_VideoCombine (#13)#

디코딩된 프레임에서 최종 MP4를 작성합니다. 목표 전달에 맞춰 frame_rate를 설정하고 crf를 조정하여 품질을 위해 파일 크기를 교환하세요. 나중에 편집할 계획이라면 약간 더 높은 품질 설정을 선호하세요.

선택적 추가 사항#

  • 장면 아이디어를 짧게 유지하세요. 주제, 설정 및 카메라 의도가 분명한 한두 문장이 가장 신뢰할 수 있는 프롬프트 작성기 캡션을 생성합니다.
  • Image2Video의 경우 대상 가로 세로 비율과 조명에 이미 맞춰진 첫 프레임을 제공하세요. 가져오기 전에 과도한 업스케일이나 크롭을 피하세요.
  • 짧은 클립(6~12초)으로 시작하세요. 더 긴 지속 시간은 드리프트를 증폭시키고 더 신중한 프롬프트가 필요합니다.
  • 제공된 부정적 라이브러리를 그대로 사용하고, 주제에 중요한 몇 가지 금지 사항만 추가하세요. 너무 긴 부정은 원하는 세부 사항을 억제할 수 있습니다.
  • 샘플러 seed를 고정하여 표현을 반복한 다음, 구성 및 타이밍이 적절하게 느껴지면 대안을 탐색하기 위해 변형하세요.
  • 움직임이 너무 빠르거나 느리게 보이면 먼저 카메라 표현보다는 초 컨트롤을 조정하세요. 타이밍 변경은 캡션 전체에 일관되게 전파됩니다.

링크 및 참조

감사의 글#

이 워크플로우는 다음 작품 및 리소스를 구현하고 확장합니다. PAN2 모델에 대해 IFM, PAN2 가중치에 대해 Comfy-Org, PAN2 프롬프트 작성기 및 창작자 워크스루 및 샘플 워크플로우에 대해 benjiyaya 및 AI Future Tech에 감사드립니다. 권위 있는 세부 사항은 아래 연결된 원본 문서 및 저장소를 참조하세요.

리소스#

참고: 참조된 모델, 데이터 세트 및 코드의 사용은 해당 저자 및 유지 관리자가 제공한 라이센스 및 약관에 따릅니다.

RunComfy
저작권 2026 RunComfy. All Rights Reserved.

RunComfy는 최고의 ComfyUI 플랫폼으로서 ComfyUI 온라인 환경과 서비스를 제공하며 ComfyUI 워크플로우 멋진 비주얼을 제공합니다. RunComfy는 또한 제공합니다 AI Models, 예술가들이 최신 AI 도구를 활용하여 놀라운 예술을 창조할 수 있도록 지원합니다.