史詩 CineFX | CogVideoX、ControlNet 和 Live Portrait 工作流程

什麼是 ComfyUI CogVideoX 工作流程

它通過 ComfyUI CogVideoX 集成工作流程將您的簡單視頻影像轉變為史詩般的電影場景。此工作流程利用 CogVideoX、ControlNet 和 Live Portrait 的力量，無需昂貴設備即可提供專業級視覺效果。無論您是獨立電影製作人還是探索 AI 驅動視頻製作的創作者，這個工具都能幫助您推動創意邊界。

CogVideoX 工作流程的主要特點

• CogVideoX：使用 AI 驅動的精確性生成詳細的電影場景。
• ControlNet 集成：添加姿勢、邊緣和深度指導，實現對轉換過程的無與倫比的控制。
• Live Portrait：精細化表演並保持面部細節一致性。
• 比較輸出：並排分析生成的結果與原始影像以進行精細化和共享。

如何使用 CogVideoX 工作流程

1. CogVideoX 工作流程的主要組成部分

CogVideoX 工作流程 具有兩個主要組成部分，旨在提供卓越的電影效果：

1. 使用 CogVideoX 進行視頻生成：
   • 此階段處理視頻幀並整合 ControlNet 指導，確保專業級視覺效果的精確姿勢、邊緣和深度對齊。
2. CogVideoX 中的 Live Portrait 集成：
   • 通過精細化面部細節並保持幀間一致性來增強表演效果，非常適合需要詳細表情的場景。
   

有效使用 CogVideoX 工作流程的提示

• 默認建議：
  • 開始進行 視頻生成 步驟以優化處理時間和資源。這對於使用 CogVideoX 的大多數電影轉換非常理想。
• 何時使用 Live Portrait：
  • 如果在初始視頻生成過程中表演細節或面部表情未能準確轉移，請啟用此組件。這確保最終輸出保持自然和一致的外觀。

2. 運行 CogVideoX 工作流程

1. 加載您的視頻：
   • 使用加載視頻節點上傳您的影像。
   • 配置要處理的幀數：
     • 默認：48 幀（訓練於 CogVideoX）。
     • 高幀數（例如 64）需要適當的 GPU 功能。
     
2. 調整解析度：
   • 在調整圖像大小節點中設置視頻解析度。
   • 建議：寬度：768，高度：432。
   
3. ControlNet 配置：
   • 使用切換節點選擇所需的指導模式：
     • Input1：原始視頻，用於圖像到圖像轉換。
     • Input2(Pose)：最佳捕捉角色運動和動態姿勢。
     • Input3(Canny)：通過邊緣檢測維護場景結構的理想選擇。
     • Input4(Depth)：提供空間一致性，特別適用於複雜背景。
   • 調整 ControlNet 強度以平衡輸入保真度和創意自由。
   
4. 編寫提示：

   • 使用正面和負面提示來定義場景的美感。

   • 正面提示範例：

     一片神秘的森林，樹木發光，電影風格，高度詳細。

   

3. 使用 CogVideoX 工作流程處理視頻

1. 運行視頻生成：
   • 最初禁用 Live Portrait 以節省處理時間。
   • 排隊您的提示並開始處理。
   
2. 啟用 Live Portrait（可選）：
   • 使用 Live Portrait 精細化面部細節和表演。
   • 向提示中添加特定表情（例如 "燦爛微笑"）以改善結果。

4. 使用 CogVideoX 工作流程比較視頻

• 啟用內建的比較輸出以評估原始和生成視頻之間的差異。
• 使用此功能展示結果或在社交平台上共享。

CogVideoX 工作流程的高級提示

• 幀優化：
  • 使用 "每第 n 幀" 處理較長視頻以縮短處理時間，同時插值缺失幀。
• 創意提示：
  • 嘗試多樣提示以獲得獨特的視覺風格。
• ControlNet 微調：
  • 調整 ControlNet 強度，以獲得更多創意自由或更嚴格遵循輸入視頻。
  

CogVideoX 工作流程的範例使用案例

1. 加載某人走路的後院視頻。

2. 應用以下提示：

   將後院轉變為未來城市景觀，帶有發光的霓虹燈，電影風格。

3. 使用 ControlNet（Depth）實現空間一致性。

4. 處理視頻並根據需要使用 Live Portrait 精細化表演。

5. 使用比較功能展示轉變。

CogVideoX 工作流程的鳴謝

這個非凡的工作流程由 Mickmumpitz 精心設計，他的創意和技術專長使這一切成為可能。全權歸功於 Mickmumpitz！欲了解詳細教程，請查看他的 YouTube 頻道：。