ComfyUI>ワークフロー>PAN2 ComfyUI ワークフロー for テキストと画像からビデオへ

PAN2 ComfyUI ワークフロー for テキストと画像からビデオへ

Workflow Name: RunComfy/PAN2-ComfyUI
Workflow ID: 0000...1566
PAN2を使用してシーンのアイデアを短いビデオに変換します。テキストまたは最初のフレームの画像から始めます。ローカルのPrompt Writerで簡潔なプロンプトを拡張します。被写体のアクションとカメラの動きをタイミングのあるキャプションで導きます。1つのキャンバスで入力モードを切り替えます。

PAN2 ComfyUI Workflow Workflow

PAN2 ComfyUI Workflow - T2V I2V with Prompt Writer
Want to run this workflow?
  • Fully operational workflows
  • No missing nodes or models
  • No manual setups required
  • Features stunning visuals

PAN2 ComfyUI Workflow Examples

PAN2 ComfyUI ワークフロー: テキストまたは画像からビデオへ ローカルのPrompt Writer使用#

このPAN2 ComfyUI ワークフローは、短いシーンのアイデアまたは最初のフレームの画像を一貫したビデオに変換します。PAN 2ワールドモデルを生成に使用し、簡潔なコンセプトをタイミングのあるキャプションに拡張するローカルのPrompt Writerを追加します。

このワークフローは、長いプロンプトを手書きせずに、信頼性のある動き、一貫した照明、安定したジオメトリを求めるクリエイター向けに設計されています。テキストからビデオ、画像からビデオの両方が同じキャンバス上で動作し、解像度と持続時間のコントロールを共有し、直接MP4にエクスポートします。

Comfyui PAN2 ComfyUI ワークフローの主要なモデル#

  • IFM PAN 2 ワールドモデル。テキストまたは画像の条件付けから時間的に一貫したビデオを予測するコアジェネレーターで、安定したワールドモデリングとカメラの動きに焦点を当てています。ソース: IFM/PAN2。
  • ComfyUI用のPAN 2 ウェイト。ComfyUIローダーやサンプラーと互換性のあるPAN2ウェイトのメンテナンスされたパッケージで、このグラフ上での迅速なセットアップを可能にします。ソース: Comfy-Org/PAN2。
  • Hunyuanスタイルの潜在ビデオVAE。ビデオパイプラインで使用されるコンパクトな潜在空間にフレームをエンコードおよびデコードするビデオVAEで、マルチ秒クリップの速度とメモリ使用量を改善します。背景: Tencent/HunyuanVideo。
  • PAN2互換のテキストエンコーダー。Qwenファミリーのエンコーダーで、Prompt Writerのタイミングのあるキャプションをサンプラーのためのポジティブおよびネガティブな条件付けに変換します。

Comfyui PAN2 ComfyUI ワークフローの使用方法#

一目で、グラフはサンプリング前にマージされる2つの並列パスを提供します。Text2VideoまたはImage2Videoのいずれかを選択し、短いアイデアを書き、解像度と持続時間を一度設定し、Prompt WriterがPAN2のための構造化された条件付けを生成します。最終的なサンプラーは潜在フレームをレンダリングし、それをデコードしMP4に結合します。

Image2Video グループ#

リファレンスとして静止画像で外観を固定したい場合は、このパスを使用します。LoadImage(#32)で最初のフレームを読み込み、それはResolutionSelector(#21)に従ってResizeImageMaskNode(#33)でリサイズされ、その後Wan22ImageToVideoLatent(#31)で時間的潜在に変換されます。持続時間は共有された秒コントロールから来て、フレーム数に自動的に変換されます。この潜在はマージポイントに流れ込み、PAN2 ComfyUI ワークフローの残りがサンプル、デコード、ビデオのエクスポートを行います。

Text2Video グループ#

テキストからシーン全体を生成したい場合はこれを選択します。EmptyHunyuanLatentVideo(#14)はImage2Videoと同じ解像度と持続時間のコントロールに基づいてクリーンな時間的潜在を作成します。シーンの動きとペーシングはPrompt Writerのキャプションから来るので、手動のキーフレームなしでカメラの動きと被写体のアクションを作り上げることができます。このパスはImage2Videoで使用される同じマージポイントにフィードし、サンプリングとエクスポートを続けます。

共有コア: Prompt Writer と条件付け#

PAN2PromptWriter(#22)に1~3文のシーンアイデアを書きます。このノードはそれを時間的に合わせたキャプションと一般的なアーティファクトを抑制する伴うネガティブライブラリに拡張します; 両方の出力はPreviewAny(#9)とPreviewAny(#24)でプレビューされ、必要に応じてテキストをコピーまたは修正できます。CLIPTextEncode(#10)とCLIPTextEncode(#11)はこれらの文字列をモデルのためのポジティブおよびネガティブな条件付けに変換します。プロンプトを最小限に保つことができるのは、ライターが被写体のアクション、カメラの動き、連続性のキューを自動的に追加するためです。

サンプリング、デコード、エクスポート#

モデルパスはPAN2をロードし効率的なアテンションを設定し、その後KSampler(#7)があなたの条件付けとアクティブな潜在パスを使用して潜在ビデオを生成します。VAEDecode(#12)は潜在をフレームに戻します。VHS_VideoCombine(#13)はそのフレームをあなたの選んだフレームレートと品質でMP4に組み立て、再現性のためのワークフローメタデータを埋め込みます。

Comfyui PAN2 ComfyUI ワークフローの主要なノード#

PAN2PromptWriter (#22)#

短く自然な記述をビデオに合わせたタイミングのあるキャプションに展開し、堅牢なネガティブプロンプトを追加します。promptを調整して被写体、環境、カメラの意図を平易な言葉で説明し、durationを全体的なクリップの長さに合わせます。ショット間での創造的な変化を増やしたり減らしたりしたい場合は、temperatureまたはtop_pを調整してください。繰り返し可能なストーリーテリングのビートのために、seedを固定してください。

ResolutionSelector (#21)#

アスペクト比とメガピクセルターゲットから両方のパスの作業幅と高さを設定します。最初に比率を選び、次にピクセル数を上下させて品質と速度のバランスを取ります。Image2VideoとText2Videoを同じセレクターに保つことで、モードを切り替えたときにスケールが不一致にならないようにします。

Wan22ImageToVideoLatent (#31)#

最初の画像をImage2Videoルート用の時間的に一貫した潜在シーケンスに変換します。すでに意図した比率に一致する鮮明で明るいフレームを提供し、クロッピングの驚きを避けます。長さは自動的に供給されます; 共有された秒コントロールを変更することでそれを再訪できます。

EmptyHunyuanLatentVideo (#14)#

選択された解像度と持続時間を使用してText2Videoルート用の空白の時間的潜在を作成します。これはPrompt Writerのガイダンスから純粋に動きを発明するための最もクリーンな方法です。より長いクリップの場合、ドリフトを最小限に抑えるためにいくつかの短いテイクを生成し、それらを編集して一緒にすることを検討してください。

Any Switch (rgthree) (#35)#

どの潜在パスが生成を駆動するかを選択します。画像からビデオの潜在を選択すると、リファレンスフレームからの厳密なビジュアル連続性が得られます。完全にテキスト駆動のビデオのために空の潜在に切り替えます。グラフを再配線せずにランごとに切り替えることができます。

KSampler (#7)#

マージされたモデルとあなたの条件付けを使用して時間をかけてコアデノイジングステップを行います。品質と速度のためにstepsを調整し、プロンプトの遵守と自然さのためにcfgを、Image2Video潜在からの精緻化のためにdenoiseを調整します。schedulerとsampler_nameを賢くペアリングしておくと、ここでの小さな変更が動きのスムーズさに顕著な影響を与えることがあります。

VHS_VideoCombine (#13)#

デコードされたフレームから最終的なMP4を書き込みます。frame_rateをターゲットデリバリーに一致させ、ファイルサイズと品質をトレードするためにcrfを調整します。後で編集する予定がある場合は、わずかに高品質の設定を好みます。

オプションのエクストラ#

  • シーンのアイデアを短く保つ。一つまたは二つの文で明確な被写体、設定、カメラの意図を持つことが最も信頼性のあるPrompt Writerのキャプションを生成します。
  • Image2Videoの場合、すでにターゲットアスペクト比と照明に一致する最初のフレームを提供し、インポート前に激しいアップスケールやクロップを避けます。
  • 短いクリップ(6〜12秒)から始める。長い持続時間はドリフトを増幅し、より慎重なプロンプトが必要です。
  • 提供されたネガティブライブラリをそのまま使用し、あなたの被写体に重要な数少ない禁止だけを追加します; 長すぎるネガティブは望ましい詳細を抑制することがあります。
  • サンプラーのseedを固定して表現を繰り返し、構成とタイミングが正しいと感じたらそれを変えて代替案を探ります。
  • 動きが速すぎるまたは遅すぎる場合は、まずカメラの表現を調整するのではなく秒コントロールを調整し、タイミングの変更がキャプション全体に一貫して伝播するようにします。

リンクと参照

謝辞#

このワークフローは次の作品とリソースを実装および基にしています。PAN2モデルのためのIFM、Comfy-OrgのためのPAN2ウェイト、benjiyayaとAI Future TechのためのPAN2 Prompt Writerおよびクリエイターのウォークスルーとサンプルワークフローに感謝します。権威ある詳細については、以下のリンクされたオリジナルのドキュメントとリポジトリを参照してください。

リソース#

Note: 参照されているモデル、データセット、およびコードの使用は、それぞれの著者およびメンテナーによって提供されたライセンスと条件に従います。

RunComfy
著作権 2026 RunComfy. All Rights Reserved.

RunComfyは最高の ComfyUI プラットフォームです。次のものを提供しています: ComfyUIオンライン 環境とサービス、および ComfyUIワークフロー 魅力的なビジュアルが特徴です。 RunComfyはまた提供します AI Models, アーティストが最新のAIツールを活用して素晴らしいアートを作成できるようにする。