MiniMax H3 Singularity Reference To Video: 在 ComfyUI 中進行多參考、身份保留的視頻生成#
MiniMax H3 Singularity Reference To Video ComfyUI 工作流程將多個角色、風格和場景參考轉換為連貫的、時間穩定的視頻。其設計旨在保持主體在各幀中的一致性，同時允許對外觀、服裝、照明和環境進行強大的創意控制。
該工作流程圍繞簡潔的兩階段擴散配方構建，中間有一個潛在升頻，平衡了控制的運動和高保真度細節。它非常適合需要從頭到尾保持身份和風格一致的時尚影片、舞台表演、科幻短片和動畫角色序列。
Comfyui MiniMax H3 Singularity Reference To Video 工作流程中的關鍵模型#
- MiniMax-h3 Singularity v1.3 (reference-to-video checkpoint) 社區 reference-to-video 模型，用於將文本提示與圖像參考融合，生成時間連貫的片段，具有強烈的身份和風格保留。Model card
- CLIP 文本編碼器 將提示映射到視頻模型理解的語義空間，啟用對構圖、照明和運動的提示引導。查看原始論文以了解 CLIP 的文本圖像對齊背景：Learning Transferable Visual Models From Natural Language Supervision。
- 與檢查點兼容的自編碼器 (VAE) 將幀編碼到潛在空間以進行快速擴散，並在保留細節的同時將最終潛在編碼解碼回 RGB。
如何使用 Comfyui MiniMax H3 Singularity Reference To Video 工作流程#
這個 ComfyUI 圖表遵循清晰的路徑：攝取參考和提示，生成低成本基礎通道以鎖定身份和運動，升頻潛在以獲取細節，精細化以提高清晰度，然後將幀組裝成視頻。
參考和提示設置#
提供多個參考圖像，涵蓋主體的角色（正面或3/4視角以確保身份）、傳達藝術指導的風格幀，以及可選的場景參考以設置環境或調色板。保持面部清晰且合理，以幫助模型錨定身份。撰寫簡明的正面提示，命名主體、服裝、設置和照明，並撰寫簡短的負面提示以排除不喜歡的工件。如果計劃多個鏡頭，保持提示穩定，僅調整必須更改的部分以維持連續性。工作流程將所有參考與提示混合，確保主體在各幀中一致呈現。
基礎生成通道#
基礎通道在保持經濟步驟的同時，建立主體相似性、姿勢和廣泛運動。它以可靠的身份和穩定的運動交換微觀細節，非常適合進行迭代探索。設置種子以確保跨運行的可重現性，僅在主體偏移時調整引導強度。當您喜歡整體運動和構圖時，保持種子不變，以便在後續階段保持相同的身份。如果主體仍然不穩定，增強最相關的參考圖像或簡化提示。
潛在升頻#
潛在升頻階段在引入細節之前放大潛在空間中的工作分辨率。在此時升頻可以保留您在基礎通道中批准的運動，同時為清晰的邊緣、髮絲細節和布料紋理創造空間。由於升頻發生在潛在中，它增加了細節而不引入新的運動抖動。如果您打算輸出更高分辨率，此階段是準備清晰像素以進行精細化的槓桿。保持種子和參考不變以確保連續性。
精細化通道#
精細化通道在不重寫構圖或運動的情況下，銳化紋理、輪廓和小特徵。它有意簡短，以增強而不是重新構想您的基礎通道，這保留了來自參考的身份和風格。使用此通道來展現材料屬性，如皮革光澤、亮片或科幻面板，並減少面部和眼部的模糊。如果您注意到過度銳化或閃爍，稍微降低提示強度或減少精細化通道的應用強度。輸出是一組清晰、一致的幀，準備編碼。
組裝和導出#
最後階段將幀打包成您選擇的幀速率和分辨率的視頻片段。選擇適合主體運動的持續時間和 fps；較慢、刻意的運動通常在中等幀速率下看起來最佳。保存為常見的容器，如 MP4 或 WebM，以便於分享。方法性地命名輸出，以便您可以根據種子、參考或提示筆記比較變化。如果您計劃將鏡頭編輯在一起，請使用相同的種子導出幾個鏡頭，以確保在剪輯之間鎖定身份。
可選附加功能#
- 根據角色策劃參考：1-2個用於身份，1個用於風格，1個用於環境。避免在參考中混合衝突的照明。
- 使用緊密裁剪的身份參考，使面部主導畫面；使用更寬的風格或場景幀來設置外觀和調色板。
- 保持提示模塊化。僅更換每個鏡頭更改的部分，如相機角度或背景，以維持身份。
- 從短片開始以驗證運動和相似性，然後在您對外觀滿意後擴展持續時間。
- 如果需要更強的連續性，重用相同的種子並保持最具影響力的參考圖像不變。
這個 MiniMax H3 Singularity Reference To Video 工作流程為您提供了一種快速、可重複的方式，將精心策劃的參考直接轉換為 ComfyUI 中的電影化、身份一致的視頻。
致謝#
此工作流程實施並構建在以下作品和資源之上。我們感謝 RunningHub 提供的工作流程來源以及 WarmBloodAban 提供的 MiniMax H3 Singularity 模型的貢獻和維護。 有關權威詳情，請參閱下面鏈接的原始文檔和存儲庫。
資源#
- RunningHub/Workflow source
- Docs / Release Notes: Workflow source
- WarmBloodAban/Minimax-h3_Singularity
- Hugging Face: WarmBloodAban/Minimax-h3_Singularity
注意：使用所引用的模型、數據集和代碼需遵守其作者和維護者提供的相應許可和條款。