IC-Light | 影片重光 | AnimateDiff

ComfyUI IC-Light 工作流程適用於影片重光

利用 ComfyUI IC-Light 工作流程，全面發揮您影片項目的潛力，專為增強 "人像" 影片的光影而設計。通過 ComfyUI IC-Light，您只需提供您的提示和光圖元素（如形狀和霓虹燈），即可輕鬆轉換您的影片。該工具將創建一個光影顯著改善的新影片。

如何使用 ComfyUI IC-Light 工作流程

1. 上傳來源影片：首先上傳您想要增強的影片。
2. 上傳光圖影片或單一光圖圖像：選擇一個光圖影片或單一圖像作為您的新光影模板。
3. 輸入載入上限及其他設置，光圖影片應使用相同設置。
4. 輸入描述新光影設置的提示，如陽光或霓虹燈。
5. 選擇您的模型。建議選擇現實模型。
6. 如有需要，更改光圖組合及其他設置。
7. 點擊渲染。

輸出將保存於 ComfyUI > Outputs

Inputs_1 - 設置

這裡有 5 個設置：

• 取樣器步驟：決定 KSampler 渲染圖像所需的總步驟數。應保持不變。[默認值 26]
• 細節增強器：增加最終渲染中的細微細節。[使用值介於 0.1 和 1 之間]
• 種子：控制每個 KSampler 的生成種子。
• 取樣器 CFG：控制 KSampler 的 CFG 值。
• 精煉器放大：作用類似於高分辨率修正值。[使用 1.1 – 1.6 之間的值以獲得最佳效果]

提示

• 正面提示：輸入最能描述您圖像的新光影效果的提示。
• 負面提示：設置為提供最佳效果。歡迎編輯。
• Clip Text 編碼節點：有助於編碼文本以最大化質量。保持 "full"

模型和 Loras

• 檢查點：選擇任何 realistic SD 1.5 模型以獲得準確結果。可選擇任何 SD 1.5 模型以獲得風格化效果。
• Loras：[可選] 如果需要，從提供的列表中選擇任何 loras。不要以全強度使用。使用約 0.5-0.7 可達到最佳效果

輸入來源影片

• 上傳來源影片：在此點擊並上傳您想更改光影的人像影片。
  • 應小於 100 MB，大尺寸上傳將失敗。
  • 不應超過 15-20 秒。長影片可能無法渲染
  • 應為 720p 或更低
  • 如果需要跳過一些開始幀，請使用跳幀節點。[光圖影片也將跳過這些幀]
• 適合圖像尺寸限制器：在此限制渲染解析度，無論是橫向還是縱向，最大解析度將始終小於或等於設置值。
  • 使用 800 – 1200 之間的值以獲得最佳效果。[這將影響 Vram]

重要：使用 10 的幀載入上限進行首次測試

• 如果您有 24 GB，請使用約 200 - 300 幀，解析度為 1000 – 1200。
• 如果要渲染所有幀，請使用 0。[不建議用於較長影片]

遮罩和深度設置

• 遮罩：使用 Robust Video Matting，默認設置即可。
• 深度 ControlNet：使用最新的 DepthAnything v2 模型。
  • 強度和結束百分比設置為 75% 以達到最佳效果
  • 使用 Co 以獲得最佳效果。

光圖

• 上傳光圖：點擊並上傳您想要的光圖影片。
  • 它將自動縮放到來源影片的尺寸
  • 確保其長度或尺寸等於或大於來源影片，否則會出錯。
• 光圖 ControlNet：此光圖也用作光控制網絡，使用
• CN 強度和結束百分比：在此使用低值，較高的值可能導致過曝或光影過渡過於銳利。

單一光圖

• 要使用單一圖像作為光圖，請取消靜音這些節點並將重新路由節點連接到 “Pick one Input” 節點。

AnimateDIff

• 加載 Animatediff 模型：您可以使用任何模型來實現不同效果。
• Animatediff 其他節點：您需要對 animatediff 有一定了解以更改其他設置
• 設置 SMZ：這是節點以提高模型管道的質量，所有設置均已預定義以良好工作。

光圖的組合和 IC 調節

• 上述頂部調整節點（灰色）用於控制 IC-Light 調節的調節，使其對比度更低並控制亮度。
• 生成新背景：當禁用時，將使用原始圖像輸入並嘗試根據正面提示框中的 “背景提示” 映射細節至來源影片的背景

[1girl, sunlight, sunset, white shirt, black short jeans, interior, room]

• 當啟用生成新背景時：將根據深度生成新背景

[1girl, sunlight, sunset, nature in the background, sky]

同時，深度 ControlNet 的強度和結束百分比降至 45%，以在背景中留出開放區域。

• 光圖置於頂部：當為 True 時，光圖將置於來源影片之上，更具主導性；當為 False 時，來源將置於頂部，更具主導性和亮度
• 主題影響區域：兩種混合模式效果最佳
  • Multiply：根據光圖在頂部或底部使陰影區域變暗
  • Screen：根據光圖在頂部或底部使陰影區域變亮
  • 混合因子用於調整強度。

• 整體調整：這將控制從上方處理的最終光圖的亮度、對比度、伽瑪、色調。
• 圖像重新映射：使用此節點控制整體全局亮度和黑暗度。
  • 較高的最小值將使場景變亮
  • 較低的最大值將使場景變暗，並可將較亮的區域轉換為如 QrCode Monster CN 的變形對象
  • 通常將最小值設置為 0.1 或 0.2 以稍微照亮場景。
  • 最小值 0 將為光圖的黑色像素提供漆黑的陰影。

KSamplers (Raw and Refine)

IC Raw Ksampler：與其他取樣器不同，它從第 8 步開始，而不是從零開始，因為 IC-Light 條件（幀從第 8 步開始去噪）

• 例如，結束步驟為 20
• 開始步驟在
  • 0 將無光圖效果。
  • 5 將有 50% 的效果
  • 10 將有 100% 的效果。
  • 所以，約 3-8 是測試的好值。

當生成新背景為 TRUE 時，您可以低於 5 以獲得更好的結果

• Ksampler 精煉：它在 IC raw 取樣器後工作類似於 Img2Img 精煉器。

對於結束步驟為 25

• 開始步驟在
  • 10 及以下將如同 raw 取樣器並會生成變形對象
  • 15 將如同一個正確的精煉器
  • 20 將無法正常工作
  • 20 及以上將產生混亂的結果
  • 所以，默認 16 是好的。

面部修正

• 面部修正的放大：如果面部修正後的面部不滿意，您可以將其放大到約 1.2 到 1.6，以獲得更好的面部效果。
• 正面提示：在這裡您可以為面部輸入提示。默認設置為 "微笑"。您可以更改它。
• 面部去噪：使用約 0.35 – 0.45。較高的面部可能會渲染不正確，並且可能出現面部滑動問題。

保存

• 影片合併：這將以影片格式導出所有幀。如果此節點在合併時失敗，則表示幀數過多，並且內存不足。如果發生此情況，請減少幀載入上限
  • 默認情況下，它將保存到 ComfyUI > Outputs。
• 更改輸出路徑：如果您想將輸出保存到自定義保存位置，請取消靜音此節點

關於此工作流程的作者

Jerry Davos

• YouTube 頻道: https://www.youtube.com/@jerrydavos
• Patreon: https://www.patreon.com/jerrydavos

聯絡方式

• 電子郵件: davos.jerry@gmail.com
• Discord: https://discord.gg/z9rgJyfPWJ