Flux 3 Klein | 이미지 편집

Flux 3 Klein 이미지 편집 for 레이아웃 인식, 참조 보존 이미지 편집 in ComfyUI#

Flux 3 Klein 이미지 편집은 레이아웃 인식 ComfyUI 워크플로우로, 자연어 지침을 사용하여 참조 이미지를 변환하면서 전체 장면을 보존합니다. 하드 픽셀 마스크 대신 경계 상자를 사용하여 의도를 스케치하고, 일반 영어로 변경 사항을 설명합니다. 모델은 주변 구성을 유지하면서 편집을 지역화합니다.

FLUX.3 이미지 Klein Base INT8 디노이저, 경계 상자 레이아웃 프롬프트 및 Qwen 기반 프롬프트 확장기를 중심으로 구축된 이 워크플로우는 편집 리터칭, 목표 의류 또는 재료 교체, 지역적 재설계 및 영화 장면 업데이트에 뛰어납니다. 하나 이상의 참조 이미지를 제공하고, 변경할 계획인 물체에 상자를 그리며, "드레스 색상을 빨간색으로 변경"과 같은 간결한 지침으로 결과를 안내합니다.

Comfyui Flux 3 Klein 이미지 편집 워크플로우의 주요 모델#

• FLUX.3 이미지 Klein Base (INT8). 실제 디노이징 및 편집을 수행하는 핵심 확산 모델로, 단일 이미지 작업 및 효율적인 VRAM 사용을 위해 최적화되었습니다. 출처: black-forest-labs/flux-3-image-klein-base.
• FLUX.2 VAE. 참조를 잠재 공간으로 인코딩하고 편집된 결과를 RGB로 다시 디코딩하여 충실한 색상 처리를 제공합니다. Comfy 번들에 포함되어 있습니다: black-forest-labs/flux-3-image-klein-comfy.
• Qwen 텍스트 인코더 및 프롬프트 업샘플러. 경량 VL 인코더가 지침 이해를 안내하고, Qwen 기반 업샘플러가 간결한 편집을 정확하고 모델 친화적인 프롬프트로 확장합니다. 패키지: black-forest-labs/flux-3-image-klein-comfy.

Comfyui Flux 3 Klein 이미지 편집 워크플로우 사용 방법#

워크플로우는 참조 이미지를 읽고, 경계 상자를 레이아웃 인식 지침으로 변환하며, 선택적으로 Qwen으로 확장하고, FLUX.3을 지침과 참조 모두에 조건화한 후 참조의 해상도로 편집된 이미지를 샘플링합니다. 아래 그룹은 왼쪽에서 오른쪽으로 순차적으로 실행되며, 출력은 저장되어 나란히 비교됩니다.

• 참조 이미지 & 프롬프트
  • LoadImage (#11)으로 단일 참조를 로드합니다. CreateBoundingBoxes (#33)를 사용하여 편집할 요소마다 하나의 상자를 그리며, 각 상자에 "드레스" 또는 "로고"와 같은 짧은 명사 설명을 제공합니다.
  • FLUX 3 Image Klein Layout Prompt (#49)는 상자를 컴팩트하고 위치 인식 프롬프트로 변환하여 각 상자와 참조 이미지를 참조합니다. 이는 소프트 타겟 영역처럼 작동하여 하드 마스크로 작동하지 않고 주의를 안내합니다.
  • 영어 지침을 명확하고 결과 중심적으로 유지합니다 (예: "드레스 색상을 빨간색으로 변경"); 주변 장면은 명시적으로 변경하지 않는 한 보존됩니다.
• 프롬프트 업샘플링
  • 업샘플러는 Qwen 인코더 (CLIPLoader (#47))와 내장 시스템 템플릿 (PrimitiveStringMultiline (#48))을 사용하여 레이아웃 프롬프트를 확장합니다.
  • 이는 편집된 객체를 호출하고 나머지를 소스와 일관되게 유지하는 단일 구조화된 지침을 반환합니다. PreviewAny (#50)를 사용하여 샘플링 전에 확장된 텍스트를 검사할 수 있습니다.
  • 수동 제어를 선호하는 경우, 직접 작성한 자세한 지침을 프롬프트 인코더에 바로 제공하여 업샘플링을 우회할 수 있습니다.
• 프롬프트
  • 긍정 프롬프트 인코더 CLIPTextEncode (#4)는 생성된 지침을 수신합니다. 선택적 두 번째 인코더 CLIPTextEncode (#45)는 비워 두거나 피하고 싶은 항목을 나열하는 데 사용할 수 있습니다.
  • 두 인코더 모두 참조 인식 단계를 통과하여 모델이 변경해야 할 영역과 안정적으로 유지해야 할 영역을 이해할 수 있도록 합니다.
• 모델
  • UNETLoader (#1)은 FLUX.3 이미지 Klein Base (INT8)를 로드합니다. CLIPLoader (#2)는 FLUX.3에서 사용하는 경량 텍스트 인코더를 로드합니다. VAELoader (#3)는 잠재 인코드/디코드를 위한 VAE를 제공합니다.
  • 이 구성 요소들은 참조로부터 장면 레이아웃, 관점, 조명을 존중하여 편집이 이루어지도록 함께 작동합니다.
• 여기에서 더 많은 참조 이미지를 플러그인하세요
  • ReferenceMultiLatent (#17)은 추가 참조를 받아 정체성, 재료, 스타일을 안정적으로 유지합니다. 첫 번째 이미지는 장면을 고정하며, 후속 이미지는 지침에 언급한 세부 사항을 기여할 수 있습니다.
  • 출력 크기를 주요 참조에 맞추거나 더 많은 충실도나 다른 캔버스가 필요할 때 이 단계를 조정할 수 있습니다.
• 샘플링
  • KSampler (#7)은 긍정/부정 조건화 및 ReferenceMultiLatent (#17)에서 제공되는 참조 크기의 잠재를 사용하여 확산 단계를 수행합니다.
  • 재현성을 위해 고정된 seed를 사용하고, 품질을 높이기 위해 steps를 늘리며, 지침 준수와 자연스러움의 균형을 위해 cfg를 적절히 조정합니다. denoise는 미세한 리터치에서 더 큰 변경까지 편집 강도를 제어합니다.
• 저장 및 비교
  • VAEDecode (#8)는 최종 잠재를 이미지로 변환합니다. SaveImageAdvanced (#51)는 이를 디스크에 저장합니다.
  • ImageCompare (#18)는 원본과 편집된 결과를 나란히 보여 빠른 A/B 검토를 가능하게 합니다.

Comfyui Flux 3 Klein 이미지 편집 워크플로우의 주요 노드#

• CreateBoundingBoxes (#33)
  • 변경할 계획인 항목 주위에 간단하고 겹치지 않거나 약간 겹치는 상자를 그리고, 각 상자에 짧고 단수형 명사를 이름으로 지정합니다. 이러한 상자는 주의를 유도하지만 하드 마스크가 아니므로 가장자리가 자연스럽게 통합됩니다. 명확한 지침을 유지하기 위해 구체적인 변경마다 하나의 상자를 선호하세요.
• FLUX 3 Image Klein Layout Prompt (#49)
  • 상자와 설명자를 소스 이미지를 참조하는 컴팩트하고 레이아웃 인식 지침으로 변환합니다. 실행 간에 설명자를 안정적으로 유지하고, 명령형 목소리로 편집을 표현하세요. 이는 모델이 의도된 영역을 목표로 하면서 장면 컨텍스트를 보존하는 데 도움이 됩니다.
• TextGenerate (#46)
  • 간략한 방향을 참조와 일관된 풍부하게 지정된 지침으로 확장합니다. 정확하고 재현 가능한 편집을 원할 때 사용하세요; 이미 완전하고 독립적인 프롬프트를 작성한 경우 이를 우회하세요. 확장이 너무 장황하게 느껴지면 초기 표현을 간소화하고 재생성하세요.
• ReferenceMultiLatent (#17)
  • 참조 크기의 잠재 캔버스를 구축하고, 긍정 및 부정 조건화를 주입하여 편집이 소스의 정체성, 포즈, 조명 및 재료를 존중할 수 있도록 합니다. 스타일이나 명시적으로 언급한 세부 사항을 차용하려면 보조 참조를 추가하세요. 더 많은 세부 사항이 필요할 때는 다른 곳에서 스케일을 강제하기보다 이 단계의 해상도 설정을 높이세요.
• KSampler (#7)
  • 외관 및 편집 강도를 위한 주요 레버입니다. seed를 사용하여 결과를 고정하고, steps를 사용하여 시간과 디테일을 교환하고, cfg를 사용하여 지침 충실도와 현실성을 조정하며, denoise를 사용하여 부드러운 리터칭에서 더 강한 변경으로 이동합니다. 아티팩트가 보이거나 다른 노이즈 경로를 원할 때 샘플러 알고리즘을 전환하세요.

선택적 추가 기능#

• 편집을 "포함"하는 전체 목표 캡션을 작성하세요 ("스튜디오 초상화, 드레스를 빨간색으로 변경, 나머지는 소스와 동일").
• 상자 이름을 짧은 명사로 지정하고, 상자 이름에 형용사를 피하고, 최종 상태(새 색상, 텍스트, 포즈)를 지침에 넣으세요.
• 정체성이나 소재 충실도를 위해 두 번째 참조를 추가하고 내용을 차용할 때 지침에 언급하세요.
• 속도를 위해 참조의 기본 스케일에서 시작하고, 구성이 마음에 들 때만 참조 단계의 해상도를 높이세요.
• 작은 프롬프트 조정을 비교할 때 seed를 고정하고, 대안을 탐색할 때는 이를 무작위화하세요.
• 이 Flux 3 Klein 이미지 편집 템플릿에서 사용된 모델은 Hugging Face의 Black Forest Labs에서 사용할 수 있습니다: flux-3-image-klein-base 및 Comfy 번들 flux-3-image-klein-comfy.

감사의 글#

이 워크플로우는 다음 작업 및 리소스를 구현하고 빌드합니다. 우리는 ComfyUI에 대해 Official FLUX.3 Klein ComfyUI tutorial, Black Forest Labs에 대해 Official FLUX.3 Klein ComfyUI model files, 그리고 Black Forest Labs에 대해 Official FLUX.3 Klein Base model에 대해 그들의 공헌과 유지 관리를 감사드립니다. 권위 있는 세부 사항은 아래에 링크된 원본 문서 및 저장소를 참조하세요.

리소스#

• ComfyUI/Official FLUX.3 Klein ComfyUI tutorial
  • GitHub: comfy-org/docs
  • Docs / Release Notes: Official FLUX.3 Klein ComfyUI tutorial
• Black Forest Labs/Official FLUX.3 Klein ComfyUI model files
  • GitHub: black-forest-labs/flux-3-image-klein
  • Hugging Face: black-forest-labs/flux-3-image-klein-comfy
• Black Forest Labs/Official FLUX.3 Klein Base model
  • GitHub: black-forest-labs/flux-3-image-klein
  • Hugging Face: black-forest-labs/flux-3-image-klein-base

참고: 참조된 모델, 데이터 세트 및 코드는 저자 및 유지 관리자가 제공한 해당 라이센스 및 조건에 따라 사용해야 합니다.