ComfyUI  >  工作流程  >  Hunyuan Video | Image-Prompt to Video

Hunyuan Video | Image-Prompt to Video

Hunyuan IP2V 是一個設計用來將圖像和文字提示轉換為視頻的工作流程,使用 Hunyuan Video 模型。雖然 Hunyuan Video 本身是一個文字轉視頻模型,此工作流程允許用戶從靜態圖像生成運動,提供了一種創意的方式來動畫化概念,而不僅依賴於文字描述。儘管 Hunyuan 尚未發布官方的圖像轉視頻模型,IP2V 提供了一種替代方法,使其成為 AI 驅動的動畫、概念可視化和創意敘事的寶貴工具。
This workflow needs Large/X Large/2X Large machines. (Using a smaller one may crash ComfyUI due to insufficient memory.)

ComfyUI Hunyuan Video - IP2V 工作流程

Hunyuan Video | Image-Prompt to Video
想要運行這個工作流程嗎?
  • 完全可操作的工作流程
  • 沒有缺失的節點或模型
  • 無需手動設置
  • 具有驚豔的視覺效果

ComfyUI Hunyuan Video - IP2V 範例

ComfyUI Hunyuan Video - IP2V 說明

Hunyuan Video 是一個開源的基礎模型,通過提供最先進的文字轉視頻生成能力,挑戰了封閉源系統的主導地位。基於大規模數據策劃、自適應架構設計和優化基礎設施的創新,Hunyuan Video 樹立了視覺質量的新標準。

雖然 Hunyuan Video 主要專注於文字轉視頻生成,Hunyuan IP2V 工作流程通過同一模型將圖像和文字提示轉換為動態視頻,擴展了這一能力。這種方法使用戶能夠使用視覺參考來引導內容創作,提供了一種替代方法來進行 AI 驅動的內容生產。

通過將圖像與提示結合,Hunyuan IP2V 在保留輸入關鍵特徵的同時生成運動,使其成為 AI 動畫、概念可視化和藝術敘事的有用工具。無論是製作動態場景、風格化動作,還是將靜態視覺擴展到動畫序列,Hunyuan Video 的框架都能提供高效的途徑以獲得高質量的結果。

如何使用 Hunyuan Video - IP2V 工作流程?

Hunyuan IP2V

組別以顏色區分以提高清晰度:

  1. 綠色 - 輸入
  2. 紫色 - 模型
  3. 粉紅色 - Hunyuan Sampler
  4. 紅色 - VAE + 解碼
  5. 灰色 - 輸出

在綠色節點中上傳您的輸入(圖像和文字),並在粉紅色取樣器節點中調整視頻設置,如持續時間和分辨率。

輸入 1 - 圖像

Hunyuan IP2V

上傳一張圖像作為您尋求類似結果的地方、人物或物體的參考。

輸入 2 - 文字

Hunyuan IP2V

在第一個文本框中輸入您的提示,並使用關鍵字 "<image>" 包含圖像。

例如,如果您的輸入是 "empty street" 並且您想添加一名女性,則提示將是:"A portrait of a woman, background is <image>."

Sampler

Hunyuan IP2V

您可以調整以下設置:

  • 圖像分辨率 - 最大為 1280px 720px,需要更多 VRAM。
  • 幀數 - 這設置了幀數(24 幀 = 1 秒)。

模型

Hunyuan IP2V

在此組中,模型將在首次運行時自動下載。請允許 3-5 分鐘以完成下載到您的臨時存儲中。

鏈接:

  1. Diffusion: https://huggingface.co/Kijai/HunyuanVideo_comfy/blob/main/hunyuan_video_FastVideo_720_fp8_e4m3fn.safetensors
  • ComfyUI > models > diffusion_models
  1. Vae: https://huggingface.co/Kijai/HunyuanVideo_comfy/blob/main/hunyuan_video_vae_bf16.safetensors
  • ComfyUI > models > vae

輸出

Hunyuan IP2V

渲染的視頻將保存在 Comfyui 的輸出文件夾中。


使用 Hunyuan IP2V 工作流程,您不再僅限於基於文字的視頻生成,現在您可以賦予您的圖像以運動和風格。無論是AI 影片製作、數字藝術還是創意敘事,此工作流程都讓您能夠比以往更控制地塑造您的願景

想要更多 ComfyUI 工作流程嗎?