ComfyUI Nvidia Cosmos テキスト & 画像から動画へのワークフロー

Nvidia Cosmos ワークフローとは

新しくリリースされたNvidia CosmosモデルをComfyUIで使用して、想像力を流れるような動画に変えましょう。このワークフローは、Nvidia Cosmosの強力なAI機能を示し、テキストから動画生成と画像から動画生成の機能を備えています。Nvidia Cosmosの最先端の7Bおよび14Bモデルによって、テキスト記述または静止画像から高品質な動画を作成できます。Nvidia Cosmosエンジンは、超効率的な動画処理能力のおかげで優れた結果を提供します。

Nvidia Cosmosの主な特徴

• デュアル生成モード: Nvidia Cosmosは、テキストから動画生成と画像から動画生成の両方を提供します
• 動きの保証: 常に121フレームを使用して動きのある動画を生成
• 効果的なネガティブプロンプト: 非蒸留モデルによりネガティブプロンプトを通じてより良い制御を実現
• 柔軟な画像制御: 最後のフレームから生成するか、画像間のトランジションを作成
• 超効率的なVAE: Nvidia Cosmosは、スムーズで高品質な動画生成のために洗練されたVAEシステムを採用
• 高解像度サポート: 704x704以上の解像度で動画を作成
• 正確なフレーム制御: 121フレームシーケンスに最適化
• スマート画像補間: 参照画像間のスムーズなトランジションを生成

Nvidia Cosmos ワークフローの使用方法

Nvidia Cosmosワークフローは、テキストから動画 と 画像から動画 の2つの主要部分から成ります。デフォルトでは、画像から動画 グループはバイパスされます。2つのモード間を切り替えるには:

• テキストから動画 の場合: 画像から動画 グループをバイパスしたままにします（デフォルト設定）
• 画像から動画 の場合: 画像から動画 グループを右クリックして Set Group Nodes to Always を選択します

1. Nvidia Cosmosを使用したテキストから動画への生成

セットアップと要件

• お好みのNvidia Cosmosモデルサイズを選択してください（開始には7Bを推奨）

• 解像度を設定（デフォルト1280x704; 最小704x704）
• フレーム設定:
  • 長さ: 121フレーム（モデルは121の長さで最適に動作します; これから大きく逸脱すると動画品質が低下する可能性があります。）
  • フレームレート: 24.00（最適な品質のためのデフォルトレート）
  

Nvidia Cosmosのサンプリングパラメータ

• サンプラー: res_multistep (NvidiaがCosmosに推奨するサンプラー)
• スケジューラ: karras (安定性のためのデフォルト)
• ステップ: 20 (高いほど品質が良いが遅くなる; 低いほど速いが詳細が欠ける)
• CFG: 6.5 (プロンプトガイダンスの強さ)
• デノイズ: 1.00 (1.00 = 完全変換; 低い値はより多くのオリジナルコンテンツを保持)

Nvidia Cosmosのプロンプトのコツ

• より良い結果を得るために詳細で複数文のプロンプトを使用
• 包括的なネガティブプロンプトを含める
• 短いプロンプトでも一貫した動画を生成できますが、指示に厳密には従わない可能性があります

2. Nvidia Cosmosを使用した画像から動画への生成

セットアップと要件

• Nvidia Cosmosテキストから動画と同じ基本要件
• start_image と end_image 入力をサポート

参照画像オプション

• start_image または end_image、または同時に両方を設定
• 画像はスタイルと内容が類似していると最適（スムーズなトランジションのため）

主要パラメータ

• テキストから動画モードと同一のサンプリング設定
• 同じ動画品質基準を維持

Nvidia Cosmosの高度なヒント

• より多くのVRAMで高品質な結果を得るには、Nvidia Cosmos 14Bモデルを試してみてください
• 最良の結果を得るためにプロンプトを詳細かつ記述的にする
• ユニークなトランジションのために異なる画像ペアを試してみてください

Nvidia Cosmosに関する詳細情報

Nvidia Cosmosに関する詳細と更新については、Nvidia Cosmos Official Pageを訪問してください。