VACE Wan2.1 | V2V
更新日期2025/6/16:ComfyUI版本更新至v0.3.39,以提高穩定性和兼容性,並安裝SageAttn以加快30%的生成速度。VACE Wan2.1(Video-Aware Composable Editing for Wan2.1)是一個靈活的全能模型,用於先進的AI視頻工作流程。這個V2V(視頻到視頻)工作流程允許用戶輸入源視頻和參考風格圖像,並輸出一個完全重新渲染的視頻,反映參考的視覺特徵。無論您想重新風格化動畫、更改環境,還是應用一致的美學變換,此工作流程都可以使用VACE Wan2.1模型在ComfyUI中生成高質量的參考驅動視頻到視頻轉換。ComfyUI VACE Wan2.1 工作流程
ComfyUI VACE Wan2.1 範例
ComfyUI VACE Wan2.1 說明
🌟🌟🌟 現在具有強大的14B模型和五種多功能編輯功能!確保使用此更新版本以獲得更好的效果! 🌟🌟🌟
VACE Wan2.1 | 視頻到視頻
VACE Wan2.1 通過將單個參考圖像的風格應用到整個視頻中來實現創意視頻轉換。基於VACE Wan2.1模型並集成到ComfyUI中,這個工作流程允許用戶生成視覺一致的風格化視頻,其中每一幀都採用給定圖像的紋理、顏色和情感。
對於動畫重新風格化、藝術視頻創作和實驗美學,VACE Wan2.1簡化了風格轉換過程,同時在輸出中保持時間連貫性和視覺流暢性。VACE Wan2.1技術為視頻風格化提供了一種創新的方法,藝術家和創作者將在他們的項目中發現其無價之寶。
為什麼使用VACE Wan2.1進行圖像到視頻風格轉換?
VACE Wan2.1工作流程提供了一種靈活、高效的方法來通過參考驅動風格轉換視頻:
- 使用VACE Wan2.1將單個圖像的風格應用到整個視頻序列
- 使用VACE Wan2.1技術保持風格化視頻幀的時間一致性
- 通過VACE Wan2.1處理輸出高質量720p視頻,受到視覺參考的引導
- 只需上傳一張圖像和一個視頻—VACE Wan2.1的設置要求最低
- 非常適合藝術風格化、概念動畫和視覺故事講述工作流程,由VACE Wan2.1提供動力
無論您是將實況鏡頭轉換為畫風場景,還是以獨特的美學重新構想視頻片段,VACE Wan2.1僅使用一個圖像和一個視頻即可解鎖強大的視覺轉換。VACE Wan2.1系統在整個視頻幀中出色地保留了您的參考風格的本質。
如何使用VACE Wan2.1工作流程?
VACE Wan2.1快速入門步驟:
按照以下步驟使用VACE Wan2.1生成高質量的首尾幀視頻:
- 將您的參考圖像上傳到VACE Wan2.1處理的
Load Image
節點中 - 將您的源視頻上傳到VACE Wan2.1轉換的
Upload Video
節點中 - 根據需要編輯正和負提示詞以進行VACE Wan2.1風格化
- 根據您的VACE Wan2.1項目需要更改視頻的持續時間或分辨率
- 點擊運行按鈕或按Ctrl(或Cmd)+ Enter以開始VACE Wan2.1視頻生成
- 從視頻保存節點(
Outputs
文件夾)查看和下載您的最終VACE Wan2.1視頻
1 - 加載VACE Wan2.1模型
選擇適合的Vace Compatible model and assets以進行VACE Wan2.1生成:
Wan2_1_VACE_1_3B_preview_bf16.safetensors
:VACE擴散模型加載器,用於VACE Wan2.1umt5_xxl_fp8_e4m3fn_scaled.safetensors
:CLIP文本編碼器,用於理解VACE Wan2.1中的提示wan_2.1_vae.safetensors
:VAE解碼器,用於高質量VACE Wan2.1幀輸出
2 - 輸入VACE Wan2.1的輸入
VACE Wan2.1的提示
- 正提示:
- 指導VACE Wan2.1幀的運動動態、視覺風格和場景一致性
- 使用描述性和生動的語言(例如,“陽光明媚的草地,影院照明,充滿活力的氛圍”)可以產生更豐富、更一致的VACE Wan2.1動畫
- 負提示:
- 幫助避免VACE Wan2.1輸出中的不希望的視覺偽影,如*“模糊、變形、失真、黑斑”*
- 包括像*“平滑、清晰、詳細”*這樣的術語可以進一步穩定並增強生成的VACE Wan2.1視頻的流動性
VACE Wan2.1的參考圖像
- 輸入您的參考圖像,它將指導VACE Wan2.1視頻生成的風格。
- 與源視頻相應的方向可能在VACE Wan2.1處理中產生更好的結果。
VACE Wan2.1的源視頻
- 上傳源視頻,它將用作VACE Wan2.1模型的深度控制視頻。
- 您可以直接從VHS加載視頻節點更改視頻的持續時間和FPS,以獲得自定義的VACE Wan2.1輸出。
3 - VACE Wan2.1取樣器
設置已經設定為VACE Wan2.1的最佳參數,但請隨意更改並測試其他取樣器設置以自定義您的VACE Wan2.1體驗。
4 - VACE Wan2.1輸出
渲染的VACE Wan2.1視頻將存儲在Comfyui > Output文件夾中。每個VACE Wan2.1項目都創建一個獨特的輸出,將您的參考圖像風格與源視頻的運動結合起來。
致謝
VACE Wan2.1 V2V 從圖像到視頻的工作流程基於由社區開發的開源VACE模型和節點集。VACE Wan2.1系統代表了一項重要的AI驅動視頻風格化技術的進步。
特別感謝Datou和T8star-Aix設計了VACE工作流程,並感謝Kijai創建了VACE節點系統,為VACE Wan2.1的高級功能提供動力。他們的貢獻使得在ComfyUI中基於圖像的視頻風格化變得簡單、靈活且高度創意。
我們還感謝ComfyUI開發者社區的持續支持,他們的模塊化節點架構不斷促進快速、強大和用戶友好的AI視頻工作流程,如VACE Wan2.1。