ComfyUI > ワークフロー > LivePortrait | ポートレートをアニメーション化 | Vid2Vid

LivePortrait | ポートレートをアニメーション化 | Vid2Vid

ComfyUI LivePortrait Vid2Vid ワークフローは、ドライビングビデオからソースビデオに表情や動きを転送します。これらの要素を分析して適用することにより、リアルでダイナミックな出力を作成し、顔のパフォーマンスの高度な操作とアニメーション化を可能にします。

ComfyUI LivePortrait ワークフロー

このワークフローを実行しますか？

ComfyUI でリアルな LivePortrait アニメーションを簡単に作成できるようにするノードとワークフローに感謝します。以下は、彼のワークフローの主要なコンポーネントとパラメータの概要です。

まず、の説明を読んで、ワークフローのステップを理解してください。LivePortrait Img2Vid プロセスを理解した後、LivePortrait Vid2Vid と Img2Vid ワークフローの間にいくつかの小さな違いがあることに気付くでしょう。

この LivePortrait Img2Vid ワークフローでは、"LoadImage" ノードを使用して静止画像をソースとしてロードします。しかし、Vid2Vid ワークフローでは、ソースとしてビデオをロードする必要があります。"frame_load_cap" を調整して、ロードされるフレーム数を制御します。
ソースビデオを 1024x1024 のような高解像度にリサイズして、品質を向上させます。"VHS_LoadVideo" でソースビデオをロードした後、"ImageResizeKJ" ノードを使用してフレームを 1024x1024 のような解像度にアップスケールします。これにより、最終出力のシャープネスと詳細が維持されます。ビデオを扱う際には、Img2Vid ワークフローと比較してソースに高い解像度を使用することをお勧めします。静止画像には 512x512 で十分な場合が多いですが、ビデオはより高い解像度を必要とします。
ドライビングビデオのフレームは、動きの情報のみを提供するため、処理時間を節約するために 480x480 のような低解像度にリサイズできます。

"LivePortraitProcess" ノードには、ドライビングビデオからソースにモーションを転送する方法を制御する "relative_motion_mode" パラメータがあります。Vid2Vid では、"source_video_smoothed" モードを使用することをお勧めします。
このモードでは、入力ビデオに基づいて LivePortrait の動きが時間とともにスムーズにされ、より時間的に一貫性のある安定した結果が得られます。これは特にビデオにおいて、突然のジャンプや動きのぶれが単一の画像よりも目立ちやすい場合に重要です。
"relative" や "single_frame" のような他のモーションモードは Img2Vid に適している場合がありますが、Vid2Vid には通常 "source_video_smoothed" が最良の選択です。

"VHS_VideoCombine" ノードを使用して最終出力ビデオを作成する際には、ビデオフレームとオーディオの同期を維持することが重要です。これには 2 つの主要な接続が含まれます:
まず、ソースビデオのオーディオを "Reroute" ノードを使用して "VHS_VideoCombine" の "audio" 入力に接続します。これにより、出力ビデオで元のオーディオが使用されます。
次に、ソースビデオのフレームレート (FPS) を "VHS_VideoCombine" の "frame_rate" 入力に接続します。"VHS_VideoInfo" ノードを使用して、ソースビデオからメタデータを抽出して FPS を取得できます。これにより、出力ビデオがソースのタイミングに一致します。
オーディオとフレームレートを慎重に処理することで、適切な同期とタイミングを維持した LivePortrait Vid2Vid 出力を作成でき、リアルで視覚的に魅力的な結果を得ることができます。