Flux 3 Klein | 画像編集

Flux 3 Klein 画像編集 for レイアウト認識、参照保持画像編集 in ComfyUI#

Flux 3 Klein 画像編集は、自然言語指示で参照画像を変換しつつ、全体のシーンを維持するレイアウト認識 ComfyUI ワークフローです。ハードピクセルマスクの代わりに、バウンディングボックスで意図をスケッチし、変更をプレーンな英語で記述します。モデルは、周囲の構図を維持しながら編集をローカライズします。

FLUX.3 Image Klein Base INT8 デノイザー、バウンディングボックスレイアウトプロンプト、および Qwen パワードプロンプトエクスパンダーを中心に構築されたこのワークフローは、編集的なレタッチ、ターゲットワードローブまたは素材の交換、ローカライズされた再設計、およびシネマティックシーンの更新に優れています。1つまたは複数の参照画像を提供し、変更する予定のオブジェクトのためにボックスを描画し、「ドレスの色を赤に変更する」などの簡潔な指示で結果をガイドします。

Comfyui Flux 3 Klein 画像編集ワークフローの主要モデル#

• FLUX.3 Image Klein Base (INT8)。実際のデノイジングと編集を行うコア拡散モデルで、単一画像タスクと効率的なVRAM使用に最適化されています。ソース: black-forest-labs/flux-3-image-klein-base。
• FLUX.2 VAE。参照を潜在変数にエンコードし、編集された結果をRGBに忠実にデコードします。Comfyバンドルにパッケージされています: black-forest-labs/flux-3-image-klein-comfy。
• Qwen テキストエンコーダーとプロンプトアップサンプラー。軽量なVLエンコーダーが指示の理解をガイドし、Qwenベースのアップサンプラーが簡潔な編集を正確でモデルフレンドリーなプロンプトに拡張します。パッケージ: black-forest-labs/flux-3-image-klein-comfy。

Comfyui Flux 3 Klein 画像編集ワークフローの使用方法#

ワークフローは参照画像を読み込み、バウンディングボックスをレイアウト認識の指示に変え、必要に応じて Qwen で拡張し、FLUX.3 を指示と参照の両方に条件付けし、参照の解像度で編集された画像をサンプルします。以下のグループは左から右へ順に実行され、出力は保存され、並べて比較されます。

• 参照画像 & プロンプト
  • LoadImage (#11) を使用して単一の参照をロードします。CreateBoundingBoxes (#33) を使用して、編集する予定の各要素に1つのボックスを描画し、各ボックスに「ドレス」や「ロゴ」などの短い名詞記述子を付けます。
  • FLUX 3 Image Klein Layout Prompt (#49) は、ボックスを参照画像に関連付けるコンパクトで位置認識のプロンプトに変換します。これはハードマスクとしてではなく、ソフトなターゲット領域として機能します。
  • 英語の指示を明確で結果に焦点を当てたものに保ちます（例：「ドレスの色を赤に変更する」）。周囲のシーンは明示的に変更しない限り維持されます。
• プロンプトアップサンプリング
  • アップサンプラーは TextGenerate (#46) を使用して Qwen エンコーダー (CLIPLoader (#47)) と組み込みシステムテンプレート (PrimitiveStringMultiline (#48)) を使用してレイアウトプロンプトを拡張します。
  • 編集されたオブジェクトを呼び出し、他のすべてをソースと一貫させた単一の構造化された指示を返します。PreviewAny (#50) を使用してサンプリング前に拡張されたテキストを確認できます。
  • 手動制御を好む場合は、アップサンプリングをバイパスして独自の詳細な指示を書き、プロンプトエンコーダーに直接渡すことができます。
• プロンプト
  • ポジティブプロンプトエンコーダー CLIPTextEncode (#4) は生成された指示を受け取ります。オプションの第2エンコーダー CLIPTextEncode (#45) は空のままにするか、避けたいものをリストするために使用できます。
  • 両方とも参照認識ステージを通過し、モデルがどの領域を変更し、どの領域を安定させるべきかを理解します。
• モデル
  • UNETLoader (#1) は FLUX.3 Image Klein Base (INT8) をロードします。CLIPLoader (#2) は FLUX.3 が使用する軽量テキストエンコーダーをロードします。VAELoader (#3) は潜在エンコード/デコードのためのVAEを提供します。
  • これらのコンポーネントは、参照からシーンのレイアウト、視点、照明を尊重するように編集が行われるように連携します。
• ここにさらに参照画像をプラグイン
  • ReferenceMultiLatent (#17) は、アイデンティティ、素材、またはスタイルを安定させるために追加の参照を受け入れます。最初の画像がシーンを固定し、後続の画像は指示で言及する詳細を貢献できます。
  • 出力サイズをメイン参照に結び付けて維持することも、より多くの忠実度や異なるキャンバスが必要な場合はこのステージを調整することもできます。
• サンプリング
  • KSampler (#7) はポジティブ/ネガティブ条件付けと ReferenceMultiLatent (#17) からの参照サイズの潜在変数によってガイドされる拡散ステップを実行します。
  • 再現性のために固定 seed を使用し、追加の時間で品質向上のために steps を増やし、指示の遵守と自然さのバランスをとるために cfg を適度に調整します。denoise は微細なレタッチから大きな変更までの編集強度を制御します。
• 保存と比較
  • VAEDecode (#8) は最終的な潜在変数を画像に変換します。SaveImageAdvanced (#51) はそれをディスクに書き込みます。
  • ImageCompare (#18) はオリジナルと編集された結果を並べて表示し、迅速なA/Bレビューを可能にします。

Comfyui Flux 3 Klein 画像編集ワークフローの主要ノード#

• CreateBoundingBoxes (#33)
  • 変更する予定のアイテムの周りにシンプルで重ならないか軽く重なるボックスを描画し、それぞれを短く単数形の名詞で名付けます。これらのボックスは注意を引きますが、エッジは自然に統合されます。具体的な変更ごとに1つのボックスを優先して、指示を曖昧にしないようにします。
• FLUX 3 Image Klein Layout Prompt (#49)
  • ボックスと記述子を参照画像に関連付けるコンパクトでレイアウト認識の指示に変換します。記述子を実行間で安定させ、編集を命令形で表現します。これにより、モデルが意図した領域をターゲットにしながらシーンのコンテキストを維持します。
• TextGenerate (#46)
  • 簡潔な指示を参照に一貫した豊かに指定された指示に拡張します。正確で再現可能な編集を望む場合に使用します。既に完全で自己完結したプロンプトを書いた場合はバイパスします。拡張が冗長に感じる場合は、初期の表現を簡素化して再生成します。
• ReferenceMultiLatent (#17)
  • 参照サイズの潜在キャンバスを構築し、ポジティブおよびネガティブ条件付けを注入して、ソースからアイデンティティ、ポーズ、照明、素材を尊重するように編集します。スタイルや指示で明示的に言及した詳細を借用するためにセカンダリ参照を追加します。詳細が必要な場合は、他の場所でスケールを強制するのではなく、このステージの解像度設定を増やします。
• KSampler (#7)
  • 外観と編集強度のための主要レバーです。seed を使用して結果をロックし、steps を使用して時間を交換して詳細を得ることができ、cfg を使用して指示の忠実度とリアリズムを調整し、denoise を使用して軽いレタッチから強い変更に移行します。アーティファクトが見られる場合や異なるノイズ軌道を望む場合は、サンプラーアルゴリズムを切り替えます。

オプションの追加機能#

• 編集を「折り込む」完全なターゲットキャプションを書く（「スタジオポートレート、ドレスを赤に変更、他はソースと同一」）。
• ボックスを短い名詞で名付け、ボックス名に形容詞を避け、指示に最終状態（新しい色、テキスト、ポーズ）を記載します。
• アイデンティティやファブリックの忠実さのために、第2の参照を追加し、コンテンツを借用する際に指示で言及します。
• スピードのために参照のネイティブスケールから開始し、構図が気に入ったら参照ステージの解像度を上げます。
• 小さなプロンプトの調整を比較する際に seed を固定し、代替案を探る際にはランダム化します。
• この Flux 3 Klein 画像編集テンプレートで使用されるモデルは、Black Forest Labs が Hugging Face で提供しています: flux-3-image-klein-base と Comfy バンドル flux-3-image-klein-comfy。

謝辞#

このワークフローは、以下の作品とリソースを実装し、構築しています。ComfyUI による 公式 FLUX.3 Klein ComfyUI チュートリアル、Black Forest Labs による 公式 FLUX.3 Klein ComfyUI モデルファイル、および Black Forest Labs による 公式 FLUX.3 Klein Base モデル の貢献とメンテナンスに感謝します。権威ある詳細については、以下のリンクされた元のドキュメントとリポジトリを参照してください。

リソース#

• ComfyUI/公式 FLUX.3 Klein ComfyUI チュートリアル
  • GitHub: comfy-org/docs
  • Docs / リリースノート: 公式 FLUX.3 Klein ComfyUI チュートリアル
• Black Forest Labs/公式 FLUX.3 Klein ComfyUI モデルファイル
  • GitHub: black-forest-labs/flux-3-image-klein
  • Hugging Face: black-forest-labs/flux-3-image-klein-comfy
• Black Forest Labs/公式 FLUX.3 Klein Base モデル
  • GitHub: black-forest-labs/flux-3-image-klein
  • Hugging Face: black-forest-labs/flux-3-image-klein-base

注意: 参照されたモデル、データセット、コードの使用は、それぞれの著者および管理者によって提供されるライセンスおよび条件に従うものとします。