VACE 14B: 올인원 비디오 생성 및 편집

ComfyUI VACE 14B 워크플로우란 무엇인가요?

2025년 5월 24일 업데이트 - 모델 옵션:

• Speed Mode: FP8E5M2 모델 + 양자화 활성화 (빠르고 낮은 메모리 사용)
• Quality Mode: FP8E4M3 모델 + 양자화 비활성화 (더 나은 품질, 느림)

주의: FP8E4M3 모델에서 양자화를 활성화하지 마세요. 오류가 발생할 수 있습니다.

ComfyUI VACE 14B는 다양한 비디오 생성 및 편집 기능을 하나의 모델로 통합한 강력한 통합 프레임워크입니다. Alibaba Group의 Tongyi Lab에서 개발된 고급 Wan2.1을 기반으로 구축된 ComfyUI VACE는 창작자가 전문 도구를 전환하지 않고 5가지 필수 비디오 조작 작업을 수행할 수 있게 합니다. 이 ComfyUI VACE 14B 워크플로우는 14B 매개변수 모델의 강력함을 활용하여 직관적인 인터페이스를 통해 고품질 비디오 생성 및 편집 기능을 제공합니다.

1. ComfyUI VACE 14B의 이점

• 올인원 솔루션: ComfyUI VACE는 도구 전환 없이 비디오 생성 및 편집을 위한 통합 프레임워크를 제공합니다
• 고품질 출력: 강력한 VACE 14B 모델로 최대 720p 해상도의 비디오를 생성합니다
• 유연한 제어: ComfyUI VACE 워크플로우는 참조 이미지, 마스크, 깊이 맵 및 텍스트 프롬프트를 포함한 여러 입력 모달리티를 제공합니다
• 정체성 유지: VACE 14B를 사용할 때 ComfyUI VACE는 변환 및 생성 중에 주제의 정체성을 유지합니다
• 작업 구성: ComfyUI VACE는 VACE 14B를 통해 복잡한 변환을 위한 다양한 기능을 결합할 수 있습니다

2. ComfyUI VACE 14B 워크플로우의 다섯 가지 주요 기능

ComfyUI VACE 워크플로우는 VACE 14B에 의해 지원되는 서로 다른 비디오 생성 및 편집 작업을 위한 5가지 독특한 구성 요소를 포함합니다:

1. 참조 이미지+ControlNet: ComfyUI VACE는 참조 이미지의 캐릭터로 비디오의 주인공을 교체하면서 VACE 14B 덕분에 동작과 구조를 유지합니다
2. 두 이미지로 비디오 생성: ComfyUI VACE를 사용하여 두 개의 참조 이미지에서 각각 가져온 캐릭터 또는 객체를 결합하여 비디오를 생성합니다
3. 첫 번째 및 마지막 프레임: ComfyUI VACE는 VACE 14B를 통해 프레임 간의 유동적인 동작을 보장하며 비디오 생성을 처음과 마지막 프레임으로 정확하게 안내합니다
4. 비디오 객체 편집: ComfyUI VACE는 VACE 14B를 활용하여 비디오 내 특정 객체를 선택적으로 수정하면서 다른 객체는 보존할 수 있게 합니다
5. 비디오 확장: ComfyUI VACE를 사용하여 VACE 14B 기술을 통해 시각적 일관성을 유지하면서 비디오 프레임을 확장하는 공간 외삽화를 수행합니다

3. ComfyUI VACE 14B 빠른 시작 가이드

3.1 ComfyUI VACE 참조 이미지+ControlNet 빠른 시작

1. ComfyUI VACE에서 "참조 이미지+ControlNet" 워크플로우 그룹을 선택하세요
2. Load Video (Upload) 노드에 소스 비디오를 로드하세요
3. Load Image 노드에 새 주제의 참조 이미지를 업로드하세요
   • 팁: 흰색 배경의 참조 이미지를 사용할 때 VACE 14B를 사용하면 더 나은 주제 통합 결과를 얻을 수 있습니다
4. 원하는 장면 및 스타일에 대한 설명 프롬프트를 입력하세요
5. VACE 14B로 생성된 ComfyUI VACE 출력에서 원치 않는 요소를 피하기 위해 부정적 프롬프트를 사용하세요
6. 권장 해상도: ComfyUI VACE 14B의 메모리 효율성을 위해 512x672 권장
7. 샘플링 매개변수를 조정하세요
8. "실행"을 클릭하여 참조 이미지의 스타일/주제를 사용하여 ComfyUI VACE 14B로 비디오를 생성하세요

3.2 ComfyUI VACE 두 이미지로 비디오 생성 빠른 시작

1. ComfyUI VACE에서 "두 이미지로 비디오 생성" 워크플로우 그룹을 선택하세요
2. 첫 번째 Load Image 노드에 첫 번째 참조 이미지를 업로드하세요
3. 두 번째 Load Image 노드에 두 번째 참조 이미지를 업로드하세요
4. VACE 14B에 의해 지원되는 이 ComfyUI VACE 방법은 전자 상거래 응용 프로그램에 특히 적합하며, 손을 포함한 세부 사항을 효과적으로 렌더링하는 능력으로 알려져 있습니다
5. 원하는 장면, 스타일 및 이미지 간의 동작 또는 전환 특성을 설명하는 자세한 프롬프트를 입력하세요
6. ComfyUI VACE 14B로 생성된 출력의 비디오 부드러움을 설정하기 위해 Video Combine 노드에서 frame_rate를 조정하세요
7. WanVideo Sampler 노드에서 샘플링 매개변수를 구성하세요
8. "실행"을 클릭하여 ComfyUI VACE 14B로 비디오 전환을 생성하세요

3.3 ComfyUI VACE 첫 번째 및 마지막 프레임 빠른 시작

1. ComfyUI VACE 인터페이스에서 "첫 번째 및 마지막 프레임" 워크플로우 그룹을 선택하세요
2. 첫 번째 Load Image 노드에 시작 프레임을 업로드하세요
3. 두 번째 Load Image 노드에 종료 프레임을 업로드하세요
4. 최적의 VACE 14B 결과를 위해 WanVideo VACE Start To End Frame 노드 매개변수를 구성하세요
5. ComfyUI VACE 처리에 대한 원하는 동작 및 전환 스타일을 설명하는 프롬프트를 입력하세요
6. VACE 14B 생성을 미세 조정하기 위해 샘플링 매개변수를 조정하세요
7. "실행"을 클릭하여 ComfyUI VACE 14B로 부드러운 전환 비디오를 생성하세요

3.4 ComfyUI VACE 비디오 객체 편집 빠른 시작

1. ComfyUI VACE에서 "비디오 객체 편집" 워크플로우 그룹을 선택하세요
2. Load Video (Upload) 노드를 사용하여 소스 비디오를 업로드하세요
3. 비디오 플레이어를 사용하여 비디오에서 한 프레임의 스크린샷을 수동으로 찍으세요
4. ComfyUI VACE의 VACE 14B 처리를 위해 수동 점 주석에 사용될 이 프레임을 bg_image 입력을 통해 Points Editor 노드에 업로드하세요
5. 삽입하거나 교체할 객체의 참조 이미지를 Load Image 노드에 업로드하세요
6. ComfyUI VACE Points Editor에서 다음과 같이 영역을 표시하세요:
   • 녹색 점 (Shift + Left Click): 수정할 영역을 표시 (예: 교체할 객체)
   • 빨간 점 (Shift + Right Click): 보존할 영역을 표시 (예: 배경 또는 주제)
   • 기존 점을 삭제하려면 점 위에서 오른쪽 클릭하세요
7. S2/SAM2 Segmentation 모듈이 주석을 기반으로 마스크를 생성합니다
8. (선택 사항) ComfyUI VACE의 Grow Mask With Blur 노드를 사용하여 마스크를 세밀하게 조정하세요
9. 새 객체 또는 수정 사항을 설명하는 긍정적 프롬프트를 입력하세요 (예: "전통적인 빨간 우산")
10. VACE 14B로 생성된 ComfyUI VACE 출력에서 원치 않는 요소를 제외하기 위해 부정적 프롬프트를 입력하세요
11. ComfyUI VACE 14B를 사용하여 입력에 따라 객체가 교체된 편집된 비디오를 생성하려면 "실행"을 클릭하세요

3.5 ComfyUI VACE 비디오 확장 빠른 시작

1. ComfyUI VACE에서 "비디오 확장" 워크플로우 그룹을 선택하세요
2. Load Video (Upload) 노드에 소스 비디오를 로드하세요
3. 원하는 확장 설정으로 ImagePad KJ 노드를 구성하세요
4. VACE 14B를 통해 ComfyUI VACE 처리에 확장된 영역에 표시할 내용을 설명하는 프롬프트를 입력하세요
5. VACE 14B로 강화된 ComfyUI VACE는 더 매끄러운 확장을 위한 더 나은 가장자리 처리를 제공합니다
6. 원본 비디오와의 일관성을 위해 샘플링 매개변수를 조정하세요
7. ComfyUI VACE 14B로 확장된 비디오를 생성하려면 "실행"을 클릭하세요

4. ComfyUI VACE 14B의 주요 매개변수

ComfyUI VACE의 일반 샘플링 매개변수:

• strength: 1.0 (ComfyUI VACE 14B에서 최대 효과를 위한 기본값)
  • 높음 = ComfyUI VACE 내 VACE 14B 알고리즘의 강한 효과
  • 낮음 = 원본 콘텐츠의 보존 강화
• guidance: 7-9 (ComfyUI VACE 14B 사용 시 최적의 결과를 위한 권장값)
  • 높음 = 참조/조건에 더 충실하지만 창의성 감소
  • 낮음 = 더 창의적이지만 참조에서 벗어날 수 있음
• steps: 20-25 (ComfyUI VACE 14B에 권장)
  • 높음 = 더 나은 품질이지만 느린 생성
  • 낮음 = 더 빠른 생성이지만 잠재적으로 낮은 품질
• cfg: 4.0 (VACE 14B와 통합된 ComfyUI VACE에 권장)
  • 높음 = 프롬프트 영향이 강하지만 자연스러움 감소 가능
  • 낮음 = 더 자연스러움, 그러나 프롬프트 세부 사항 무시 가능
• seed: 18 (ComfyUI VACE 14B 예시)
  • 동일한 시드 + 동일한 설정 = 동일한 결과
  • ComfyUI VACE에서 VACE 14B로 생성된 출력의 다른 변형을 위해 변경
• shift: 5.0 (ComfyUI VACE 14B의 기본값)
  • 높음 = 더 많은 동작 변형
  • 낮음 = 더 보수적인 동작

5. ComfyUI VACE 14B의 고급 매개변수

WanVideo VACE:

• num_frames: 29 (ComfyUI VACE 14B의 참조 워크플로우 기본값)
  • 높음 = 더 긴 비디오이지만 더 많은 처리 시간
  • 낮음 = 더 짧은 비디오이지만 ComfyUI VACE를 활용한 VACE 14B로 더 빠른 생성
• vace_start_percent: 0.00 (VACE 14B 사용 시 ComfyUI VACE의 기본값)
  • VACE 효과가 생성 과정에서 시작되는 위치를 제어
• vace_end_percent: 1.00 (ComfyUI VACE 14B의 기본값)
  • VACE 효과가 생성 과정에서 끝나는 위치를 제어

WanVideo VACE Start To End Frame:

• num_frames: 40 (ComfyUI VACE 14B의 기본값)
  • 높음 = 더 길고 부드러운 전환이지만 더 많은 처리 시간
  • 낮음 = 더 짧은 비디오이지만 VACE 14B로 구동되는 ComfyUI VACE로 더 빠른 생성
• empty_frame_level: 0.50 (ComfyUI VACE 14B의 기본값)
  • 높음 = 더 창의적인 중간 프레임
  • 낮음 = 더 직접적인 보간

ComfyUI VACE의 Video Combine:

• frame_rate: 16 (VACE 14B 지원 ComfyUI VACE의 기본값)
  • 높음 = 더 부드러운 동작이지만 더 큰 파일 크기
  • 낮음 = 더 끊긴 동작이지만 더 작은 파일 크기
• format: video/h264-mp4 (ComfyUI VACE 14B의 기본값)
• pix_fmt: yuv420p (VACE 14B를 특징으로 하는 ComfyUI VACE의 기본값)

ComfyUI VACE 14B의 실험적 매개변수:

• cfg_zero_star: true (VACE 14B와 함께 작동하는 ComfyUI VACE의 기본값)
  • 생성 품질에 영향을 미칠 수 있는 실험적 매개변수
• fresca_scale_high: 1.25 (ComfyUI VACE 14B의 기본값)
  • 고주파 세부 사항 보존을 제어
• fresca_freq_cutoff: 20 (VACE 14B에 의해 강화된 ComfyUI VACE의 기본값)
  • 세부 사항 보존을 위한 주파수 차단

감사의 말

이 ComfyUI VACE 14B 워크플로우는 VACE (Video All-in-one Creation and Editing)로 구동되며, Tongyi Lab, Alibaba Group의 Zeyinzi Jiang, Zhen Han, Chaojie Mao, Jingfeng Zhang, Yulin Pan, Yu Liu에 의해 개발되었습니다. ComfyUI VACE 통합은 VACE 14B를 구현하기 위해 Kijai ()의 노드와 적응을 활용합니다. VACE 14B의 원본 연구 논문은 에서 사용할 수 있습니다. VACE 14B를 특징으로 하는 이 ComfyUI VACE 워크플로우는 적절한 로컬 하드웨어가 없는 사용자를 위해 Ringhub에서도 실행할 수 있습니다.