VACE 14B：全方位視頻創建與編輯

什麼是 ComfyUI VACE 14B 工作流程？

2025/5/24 更新 - 模型選項：

• 快速模式：FP8E5M2 模型 + 啟用量化（速度更快，內存更小）
• 質量模式：FP8E4M3 模型 + 禁用量化（質量更佳，速度較慢）

注意：請勿在 FP8E4M3 模型下啟用量化，否則可能會引發錯誤。

ComfyUI VACE 14B 是一個強大的統一框架，將多種視頻生成和編輯功能整合到一個模型中。基於先進的 Wan2.1 基礎，由阿里巴巴集團的同義實驗室開發，ComfyUI VACE 使創作者能夠在不切換專業工具的情況下執行五項基本的視頻操作任務。這個 ComfyUI VACE 14B 工作流程利用 14B 參數模型的強大功能，通過直觀的界面提供高質量的視頻創建和編輯能力。

1. ComfyUI VACE 14B 的優勢

• 全方位解決方案： ComfyUI VACE 提供了一個統一的視頻創建與編輯框架，無需在工具間切換
• 高質量輸出： 使用強大的 VACE 14B 模型生成高達 720p 分辨率的視頻
• 靈活控制： ComfyUI VACE 工作流程提供多種輸入模式，包括參考圖片、遮罩、深度圖和文本提示
• 身份保留： ComfyUI VACE 在使用 VACE 14B 進行轉換和生成時保持主體身份
• 任務組合： ComfyUI VACE 允許您通過 VACE 14B 組合不同的功能進行複雜轉換

2. ComfyUI VACE 14B 工作流程中的五大關鍵功能

ComfyUI VACE 工作流程包含 5 個獨特的組件，每個組件專門用於不同的視頻創建和編輯任務，由 VACE 14B 提供支援：

1. 參考圖片+ControlNet： ComfyUI VACE 讓您可以用參考圖片中的角色替換視頻中的主角，而 VACE 14B 能保持運動和結構不變
2. 兩個圖片生成視頻： 通過 ComfyUI VACE，創建一個結合兩個角色或對象的視頻，每個角色或對象都來自單獨的參考圖片，使用 VACE 14B
3. 起始和結束畫面： ComfyUI VACE 通過設置起始和結束畫面精確引導視頻生成，確保畫面之間的流暢運動，使用 VACE 14B
4. 視頻對象編輯： ComfyUI VACE 允許您選擇性地修改視頻中的特定對象，並使用 VACE 14B 保留其他對象
5. 視頻擴展： 使用 ComfyUI VACE 進行空間擴展，擴大視頻框架，同時使用 VACE 14B 技術保持視覺連貫性

3. ComfyUI VACE 14B 快速入門指南

3.1 ComfyUI VACE 參考圖片+ControlNet 快速入門

1. 在 ComfyUI VACE 中選擇 "參考圖片+ControlNet" 工作流程組
2. 在 Load Video (Upload) 節點中加載您的源視頻
3. 在 Load Image 節點上傳新主題的參考圖片
   • 提示： 使用白色背景的參考圖片通常能在使用 VACE 14B 時獲得更好的主題整合效果
4. 輸入關於所需場景和風格的描述性提示
5. 使用負面提示避免 ComfyUI VACE 輸出中不需要的元素，由 VACE 14B 生成
6. 推薦分辨率：ComfyUI VACE 14B 的內存效率建議為 512x672
7. 調整採樣參數
8. 點擊 "Run" 生成具有參考圖片風格/主題的視頻，使用 ComfyUI VACE 14B

3.2 ComfyUI VACE 兩個圖片生成視頻快速入門

1. 在 ComfyUI VACE 中選擇 "兩個圖片生成視頻" 工作流程組
2. 將您的第一個參考圖片上傳到第一個 Load Image 節點
3. 將您的第二個參考圖片上傳到第二個 Load Image 節點
4. 這種由 VACE 14B 提供支持的 ComfyUI VACE 方法特別適合於電子商務應用，並以其有效呈現精細細節的能力而著稱，包括手部細節
5. 輸入描述所需場景、風格以及圖片之間運動或過渡特徵的詳細提示
6. 在 Video Combine 節點中調整 frame_rate 以設置 ComfyUI VACE 由 VACE 14B 創建的輸出視頻的流暢度
7. 在 WanVideo Sampler 節點中配置採樣參數
8. 點擊 "Run" 生成 ComfyUI VACE 14B 的視頻過渡

3.3 ComfyUI VACE 起始和結束畫面快速入門

1. 在 ComfyUI VACE 界面中選擇 "起始和結束畫面" 工作流程組
2. 將您的起始畫面上傳至第一個 Load Image 節點
3. 將您的結束畫面上傳至第二個 Load Image 節點
4. 配置 WanVideo VACE Start To End Frame 節點參數以獲得最佳 VACE 14B 結果
5. 輸入描述 ComfyUI VACE 處理所需運動和過渡風格的提示
6. 調整採樣參數以微調 VACE 14B 生成
7. 點擊 "Run" 創建平滑過渡視頻，使用 ComfyUI VACE 14B

3.4 ComfyUI VACE 視頻對象編輯快速入門

1. 在 ComfyUI VACE 中選擇 "視頻對象編輯" 工作流程組
2. 使用 Load Video (Upload) 節點上傳您的源視頻
3. 使用任何視頻播放器手動截取視頻中的一幀
4. 通過 bg_image 輸入將此幀上傳到 Points Editor 節點 — 此幀將用於 ComfyUI VACE 的手動點註解，進行 VACE 14B 處理
5. 使用 Load Image 節點上傳您要插入或用於替換的對象的參考圖片
6. 在 ComfyUI VACE Points Editor 中標記區域如下：
   • 綠點（Shift + 左鍵點擊）：標記要修改的區域（例如，要替換的對象）
   • 紅點（Shift + 右鍵點擊）：標記要保留的區域（例如，背景或主體）
   • 右鍵點擊現有點以刪除它
7. S2/SAM2 Segmentation 模塊將根據您的註解生成遮罩
8. （可選）使用 ComfyUI VACE 中的 Grow Mask With Blur 節點細化遮罩
9. 輸入正面提示以描述新對象或修改（例如 "傳統紅色雨傘"）
10. 輸入負面提示以排除 ComfyUI VACE 由 VACE 14B 生成的輸出中不需要的元素
11. 點擊 "Run" 生成根據您的輸入替換對象的編輯視頻，使用 ComfyUI VACE 14B

3.5 ComfyUI VACE 視頻擴展快速入門

1. 在 ComfyUI VACE 中選擇 "視頻擴展" 工作流程組
2. 在 Load Video (Upload) 節點中加載您的源視頻
3. 配置 ImagePad KJ 節點以滿足您的擴展設置
4. 輸入提示以描述 ComfyUI VACE 透過 VACE 14B 處理應在擴展區域中顯示的內容
5. ComfyUI VACE 由 VACE 14B 增強，提供更好的邊緣處理以實現更無縫的擴展
6. 調整採樣參數以保持與原始視頻的一致性
7. 點擊 "Run" 創建使用 ComfyUI VACE 14B 的擴展視頻

4. ComfyUI VACE 14B 的關鍵參數

ComfyUI VACE 的常用採樣參數：

• strength: 1.0（ComfyUI VACE 14B 的最大效果默認值）
  • 更高 = ComfyUI VACE 14B 算法的效果更強
  • 更低 = 更保留原始內容
• guidance: 7-9（使用 VACE 14B 時推薦的 ComfyUI VACE 最佳結果）
  • 更高 = 更忠實於參考/條件但創造性更低
  • 更低 = 更具創造性但可能偏離參考
• steps: 20-25（推薦用於 ComfyUI VACE 14B）
  • 更高 = 質量更好但生成速度更慢
  • 更低 = 生成速度更快但質量可能較低
• cfg: 4.0（推薦用於與 VACE 14B 集成的 ComfyUI VACE）
  • 更高 = 提示影響力更強但結果可能不夠自然
  • 更低 = 更自然但可能忽略提示細節
• seed: 18（ComfyUI VACE 14B 的示例）
  • 相同的種子 + 相同的設置 = 相同的結果
  • 變更以獲得 ComfyUI VACE 由 VACE 14B 生成的不同變體
• shift: 5.0（ComfyUI VACE 14B 的默認值）
  • 更高 = 運動變化更大
  • 更低 = 運動更保守

5. ComfyUI VACE 14B 的高級參數

WanVideo VACE：

• num_frames: 29（ComfyUI VACE 14B 參考工作流程的默認值）
  • 更高 = 視頻更長但處理時間更長
  • 更低 = 視頻更短但使用 ComfyUI VACE 利用 VACE 14B 生成更快
• vace_start_percent: 0.00（使用 VACE 14B 時 ComfyUI VACE 的默認值）
  • 控制 VACE 效果在生成過程中的開始位置
• vace_end_percent: 1.00（ComfyUI VACE 14B 的默認值）
  • 控制 VACE 效果在生成過程中的結束位置

WanVideo VACE 起始到結束畫面：

• num_frames: 40（ComfyUI VACE 14B 的默認值）
  • 更高 = 過渡更長、更平滑，但處理時間更長
  • 更低 = 視頻更短，但使用 ComfyUI VACE 由 VACE 14B 支持的生成更快
• empty_frame_level: 0.50（ComfyUI VACE 14B 的默認值）
  • 更高 = 中間幀更具創意
  • 更低 = 更直接的插值

ComfyUI VACE 中的視頻合併：

• frame_rate: 16（使用 VACE 14B 支持的 ComfyUI VACE 的默認值）
  • 更高 = 運動更流暢但文件大小更大
  • 更低 = 運動更不連貫但文件大小更小
• format: video/h264-mp4（ComfyUI VACE 14B 的默認值）
• pix_fmt: yuv420p（ComfyUI VACE 以 VACE 14B 為特色的默認值）

ComfyUI VACE 14B 的實驗參數：

• cfg_zero_star: true（使用 VACE 14B 的 ComfyUI VACE 的默認值）
  • 實驗參數，可能影響生成質量
• fresca_scale_high: 1.25（ComfyUI VACE 14B 的默認值）
  • 控制高頻細節保留
• fresca_freq_cutoff: 20（ComfyUI VACE 由 VACE 14B 增強的默認值）
  • 細節保留的頻率截止

致謝

這個 ComfyUI VACE 14B 工作流程由 VACE（視頻全方位創建與編輯）提供支持，由 Tongyi Lab, Alibaba Group 的 Zeyinzi Jiang, Zhen Han, Chaojie Mao, Jingfeng Zhang, Yulin Pan 和 Yu Liu 開發。ComfyUI VACE 集成利用了 Kijai 的節點和適配（）來實現 VACE 14B。VACE 14B 的原始研究論文可在 獲得。這些 ComfyUI VACE 工作流程以 VACE 14B 為特色，也可以在 Ringhub 上運行，適合那些沒有足夠本地硬件的人使用。