Wan2.2 Fun Inp 通過在第一幀和最後一幀之間進行自然插值,將兩張靜態圖像轉變為連貫的視頻。它專為希望在保持提示控制的同時獲得電影一致性的藝術家、動畫師和電影製作人設計。工作流程附帶兩個平行的預設,您可以優先考慮超快速的4步合成或更通用的fp8縮放生成,兩者均由 Wan 2.2 Fun Inpaint 提供支持。
Wan2.2 Fun Inp 通過在第一幀和最後一幀之間進行自然插值,將兩張靜態圖像轉變為連貫的視頻。它專為希望在保持提示控制的同時獲得電影一致性的藝術家、動畫師和電影製作人設計。工作流程附帶兩個平行的預設,您可以優先考慮超快速的4步合成或更通用的fp8縮放生成,兩者均由 Wan 2.2 Fun Inpaint 提供支持。
Wan 2.2 Fun Inpaint 14B (fp8 scaled)
主要的擴散骨幹,專門用於“Fun Inpaint”視頻生成。包括兩個變體:高噪聲用於更大的運動和創意過渡,低噪聲用於更緊密地保留您的起始/結束幀。
• 高噪聲:
• 低噪聲:
Lightning 4-Step LoRA for I2V
一個可選的LoRA,將採樣計劃壓縮為僅四步,以便快速迭代,非常適合預覽和快速草稿。
• 低噪聲LoRA:
• 高噪聲LoRA:
Wan VAE
VAE 處理 Wan 模型使用的潛在像素轉換;在解碼/編碼過程中保留細節和色調。請參閱 上的 Wan 2.2 套件。
CLIP text encoder
將您的正面和負面提示編碼為引導視覺敘事的條件向量。參考實現:。
ComfyUI Video Helper Suite (export)
將生成的幀合併為您選擇幀速率的 MP4。倉庫:。
圖中包含兩個平行組,您可以根據速度與通用性進行切換。一次僅啟用一個以獲得清晰的運行。
使用這個進行非常快速的預覽。該組加載 Wan 2.2 骨幹加上 Lightning 4-Step LoRA,並將您的提示通過短採樣器路徑。提供您的起始和結束圖像,然後根據需要調整高級參數。在內部,WanFunInpaintToVideo
(#111) 從第一幀到最後一幀播種軌跡,而短採樣器在少數步驟中細化運動和結構。
選擇此選項,當您希望擁有更廣泛的操作範圍而不受4步限制時。此路徑直接使用fp8縮放的 Wan 2.2 模型,保持相同的首尾幀指導,但具有標準的採樣器預算,以實現更細微的細節恢復和運動塑造。節點 WanFunInpaintToVideo
(#148) 錨定軌跡,然後交給下游採樣器進行改進。
兩個組都包含一個 上傳起始和結束圖像 部分。插入一個 起始圖像,設置開場構圖,並插入一個 結束圖像,定義最終的姿勢或場景。工作流程將在它們之間插值運動和外觀,尊重您的文本提示。為獲得最佳效果,保持兩張圖像的縱橫比一致。
在 正面提示 中寫下您想看到的內容,在 負面提示 中寫下您想避免的內容。節點 CLIP Text Encode (Positive Prompt)
和 CLIP Text Encode (Negative Prompt)
將您的文本轉換為影響內容、風格和動態的條件。使用簡潔的、場景導向的短語(動作、攝影機提示、材質、氛圍),而不是冗長的列表。
在 WanFunInpaintToVideo
節點中設置 width
、height
和 length
以定義空間分辨率和幀數。默認值調整為高576×1024視頻,大約3-4秒的24 fps運動。較長的序列通常受益於fp8縮放路徑;短預覽非常適合4步LoRA組。
VHS_VideoCombine
將幀組合為 MP4,默認為 24 fps 和質量友好的 CRF。文件名以每個分支的前綴(例如,Fun_Inp
和 Fun_Inp_4_Step
),以便您輕鬆比較輸出。如果需要更慢或更快的播放速度,請調整幀速率。
框選一個組,使用 Ctrl+B 啟用或禁用它。如果啟用 fp8_scaled 組,請禁用 fp8_scaled + 4 steps LoRA 組,反之亦然。您還可以使用 ComfyUI 的部分執行功能僅運行您正在調整的部分。
WanFunInpaintToVideo
(#111 和 #148)將您的 start_image 和 end_image 混合為一個連續的潛在軌跡的核心引擎。它接受 width
、height
和 length
來設置視頻大小和持續時間,然後發出潛在序列加上更新的正面/負面條件。調整此處以調整連續性、節奏或鏡頭構圖。
UNETLoader
(#101, #102)選擇 Wan 2.2 Fun Inpaint 模型變體。使用 高噪聲 進行更大膽的運動和更具變革性的插值。當保持起始和結束幀的身份和紋理為優先事項時,使用 低噪聲。根據速度需求選擇是否搭配4步LoRA。
ModelSamplingSD3
(#93)配置下游使用的採樣器計劃。保持與選擇的 LoRA 或 fp8 路徑對齊。如果看到時間閃爍,對採樣器模式或步驟進行適度調整可以平滑過渡而不過度銳化細節。
KSamplerAdvanced
(#150)對潛在序列進行精細化處理。如果需要更清晰的微觀細節(如面部、手或細長結構),稍微增加步驟;若需更柔和、更夢幻的運動,則減少步驟。避免極端的 CFG 或步數,這會破壞時間一致性。
VHS_VideoCombine
(#159)將渲染的幀合併為 MP4。調整 frame_rate
以獲得運動感和播放速度,保持默認的 pix_fmt
以獲得廣泛的播放器兼容性。較低的 CRF 產生更大的文件和更細緻的漸變;較高的 CRF 更積極地壓縮。
width
×height
匹配,以減少不必要的裁剪或扭曲。Wan 2.2 Inp Fun 工作流程通過將 首尾幀控制 與自然插值相結合,擴展了 AI 視頻生成的創意可能性。這是一個多功能工具,適用於希望在 AI 驅動項目中獲得 電影一致性 的 藝術家、動畫師和電影製作人。
特別感謝 ComfyUI 和 Wan 團隊,使 Inp Fun 工作流程整合 到下一代創意管道中無縫進行。
RunComfy 是首選的 ComfyUI 平台,提供 ComfyUI 在線 環境和服務,以及 ComfyUI 工作流程 具有驚豔的視覺效果。 RunComfy還提供 AI Playground, 幫助藝術家利用最新的AI工具創作出令人驚艷的藝術作品。