UNO ByteDance | 일관된 주제 및 객체 생성

ComfyUI UNO 설명

1. ByteDance의 ComfyUI UNO란 무엇인가요?

ComfyUI UNO 워크플로우는 ByteDance의 Universal aNd cOntrollable (UNO) 모델을 ComfyUI 환경에 통합합니다. ByteDance의 Intelligent Creation Team에 의해 개발된 UNO는 "Less-to-More" 일반화 패러다임을 기반으로 한 주제 중심 이미지 생성 기술에서 중요한 발전을 나타냅니다. UNO는 다양한 맥락과 시나리오에서 참조 주제의 정체성 특징을 유지하면서 유연하고 높은 충실도의 이미지 생성을 가능하게 합니다.

2. ByteDance의 ComfyUI UNO의 이점:

• 우수한 주제 일관성: UNO는 다양한 맥락에서 뛰어난 주제 유사성을 유지합니다.
• 주제-객체 제어: 많은 대안과 달리 UNO는 주제 참조와 객체 참조를 동시에 처리하는 데 뛰어납니다.
• 보편적 호환성: UNO는 사람, 객체, 장난감, 로고 등 다양한 유형의 주제와 함께 작동합니다.
• 자원 효율성: UNO는 제한된 VRAM 자원(24GB에서도 잘 작동)으로도 프로페셔널한 품질의 결과를 제공합니다.
• 유연한 구현: UNO는 단일 주제 및 주제-객체 생성을 위한 워크플로우를 포함합니다.

3. ByteDance의 ComfyUI UNO 사용 방법

3.1 워크플로우 설정

UNO 워크플로우에는 두 가지 주요 구성 요소가 있습니다:

상단 그룹 - 주제-객체 생성:

• 이 구성은 참조 주제 이미지와 참조 객체 이미지를 입력하여 텍스트 프롬프트에 따라 생성된 장면에서 결합합니다.

하단 그룹 - 단일 주제 생성:

• 이 구성은 단일 참조 이미지를 사용하여 다양한 맥락에서 해당 주제의 새로운 이미지를 생성합니다.

3.2 ByteDance의 UNO를 사용한 생성 프로세스

기본 설정:

1. 참조 이미지 로드:
   • 주제-객체 워크플로우(상단 그룹): 하나의 주제 참조 이미지와 하나의 객체 참조 이미지를 업로드
   • 단일 주제 워크플로우(하단 그룹): 하나의 참조 이미지를 업로드
2. ByteDance의 UNO를 위한 텍스트 프롬프트 설정:
   • 원하는 장면에 대한 설명 프롬프트를 작성하고, 참조 주제/객체가 어떻게 나타나야 하는지 포함
3. ByteDance의 UNO 매개변수 조정:
   • Width/Height: 출력 해상도 결정 (768×1024 또는 1024×1024 권장)
   • Guidance: ByteDance의 UNO 생성이 텍스트 프롬프트를 얼마나 가까이 따르는지 조절 (3.5-4.0 권장)
   • Num_steps: 높은 값(20+)은 특히 인물 사진에서 ByteDance의 UNO로 더 일관된 결과를 생성
   • Seed: 재현성을 위해 특정 시드를 설정하거나, ByteDance의 UNO 출력에서 다양성을 위해 무작위화
4. ByteDance의 UNO로 이미지 생성:
   • "Queue Prompt"를 클릭하여 ByteDance UNO 워크플로우 실행
   • "Save Image" 노드에서 결과 검토

3.3 ByteDance의 UNO 매개변수 참조

UNO Loadmodel 노드:

• model_type: 사용할 ByteDance UNO 모델 변형 결정
  • flux-dev: 품질과 성능의 균형을 잘 맞춘 표준 ByteDance UNO 모델
  • flux-schnell: 약간 낮은 품질의 더 빠른 ByteDance UNO 모델 변형

3.4 ByteDance의 UNO로 최상의 결과를 얻기 위한 팁

UNO를 위한 주제 선택:

• 주제가 두드러진 명확하고 잘 조명된 참조 이미지를 선택
• 얼굴/사람의 경우, 정면을 바라보는 중립적인 표정의 이미지가 ByteDance의 UNO와 잘 작동
• 객체의 경우, 배경 방해가 최소화된 명확한 이미지가 ByteDance의 UNO 처리에 이상적

UNO를 위한 프롬프트 엔지니어링:

• 참조 이미지와 일치하는 주제 설명을 구체적으로 작성
• ByteDance의 UNO가 생성할 원하는 장면, 조명 및 구성을 설명
• 특정 주제에 대한 참조 포함 (예: "젊은 남자", "빈티지 자전거")
• 최적의 ByteDance UNO 결과를 위해 프롬프트를 간결하지만 상세하게 유지

4. ByteDance의 UNO에 대한 기술 정보

ByteDance UNO 기술은 FLUX 모델을 기반으로 하며, 여러 주요 향상이 적용된 DiT (Diffusion Transformer) 아키텍처를 활용합니다:

• Universal Rotary Position Embedding (UnoPE): ByteDance의 UNO에서 참조 주제와 객체를 구별하는 데 도움이 되는 특수 메커니즘으로, 속성 혼란을 크게 줄입니다.
• Progressive Cross-Modal Alignment: ByteDance의 UNO가 점점 더 복잡한 다중 조건 제어를 처리할 수 있도록 하는 훈련 방법론.
• Universal Customization: ByteDance의 UNO는 특수한 훈련 없이 다양한 주제 유형을 처리할 수 있습니다.

5. 감사의 말

이 워크플로우는 ByteDance의 Intelligent Creation Team(Shaojin Wu, Mengqi Huang, Wenxu Wu, Yufeng Cheng, Fei Ding, 및 Qian He)이 개발한 UNO에 의해 지원됩니다. ByteDance의 획기적인 연구를 접근 가능한 워크플로우로 적응한 ComfyUI 통합은 커뮤니티 기여자에 의해 제공됩니다.

ByteDance의 UNO에 대한 추가 정보는 를 방문하세요.