MOSS-Image Canny Control ComfyUI: 참조 윤곽선에서 프롬프트로 유도된 재스타일#
이 워크플로우는 참조 사진의 윤곽을 텍스트 프롬프트로 유도된 새로운 정지 이미지로 변환합니다. MOSS-Image-SFT 기본 모델과 전용 Canny Control LoRA를 결합하여 감지된 엣지가 구성을 조정하고 프롬프트가 재료, 색상 및 조명을 지시합니다. 그 결과는 인식 가능한 윤곽을 잃지 않고 객체를 빠르고 신뢰할 수 있는 방법으로 재스타일링할 수 있습니다.
MOSS-Image Canny Control ComfyUI는 제품 촬영, 차량 페인트 및 트림 탐색, 그리고 실루엣과 레이아웃이 일관되어야 하는 건축 외관에 이상적입니다. 한 장의 이미지와 명확한 프롬프트를 제공하면 워크플로우는 엣지 맵에서 기하학을 보존하면서 마감과 분위기에 대한 창의적 제어를 제공합니다.
Comfyui MOSS-Image Canny Control ComfyUI 워크플로우의 주요 모델#
- OpenMOSS-Team MOSS-Image-SFT. 강력한 편집 및 생성에 맞게 세부 조정된 텍스트 조건부 이미지 모델; 프롬프트의 핵심 디노이징과 이해를 제공하면서 구조 큐에 반응합니다. Model card
- thedeoxen의 MOSS-Image Canny Control LoRA. MOSS-Image-SFT에 canny 기반 제어를 주입하여 생성된 콘텐츠가 제공된 윤곽 맵을 따르도록 하는 가벼운 어댑터. Model card
Comfyui MOSS-Image Canny Control ComfyUI 사용 방법#
고수준에서 워크플로우는 참조에서 엣지를 추출하고, MOSS-Image의 편집 인코더로 긍정적 및 부정적 프롬프트를 인코딩하고, 기본 모델과 Canny Control LoRA를 샘플링한 후 최종 이미지로 디코딩합니다. 제어 이미지는 구조를 설정하고, 프롬프트는 외관을 설정합니다.
참조 이미지 로드하기 (LoadImage (#1))#
보존하고자 하는 프레이밍과 비율로 대상의 단일, 잘 노출된 사진을 가져옵니다. 워크플로우는 이를 재스타일링의 기하학적 소스로 취급합니다. 명확한 경계와 최소한의 모션 블러를 가진 깨끗한 소스가 가장 잘 작동합니다.
Canny 윤곽 추출 및 미리보기 (canny control (#2) 및 Control (#13))#
워크플로우는 ControlNet 보조 전처리기를 사용하여 사진에서 Canny 엣지 맵을 계산하여 가장 두드러진 윤곽만이 구성을 유도하도록 합니다. 주요 주제의 강한 엣지가 우선시되며, 미세한 노이즈는 억제됩니다. 생성 전에 윤곽이 의도와 일치하는지 확인하기 위해 제어 이미지를 미리 볼 수 있습니다. 이 단계는 ControlNet Auxiliary suite의 Canny 연산자 구현을 사용합니다. 레포 참조: comfyui_controlnet_aux.
캔버스를 제어 이미지에 맞추기 (GetImageSize (#7) 및 EmptyLatentImage (#10))#
캔버스 너비와 높이는 비율을 완벽하게 유지하기 위해 제어 이미지에서 유도됩니다. 이 정렬은 비율 왜곡을 방지하고 구성 드리프트를 줄입니다. 다른 비율이 필요하면 참조를 로드하기 전에 잘라내어 제어 이미지와 캔버스가 일치하도록 하십시오.
프롬프트 작성하기 (Text Encode MOSS-Image Edit (positive) (#8) 및 Text Encode MOSS-Image Edit (negative) (#9))#
긍정적 프롬프트에서 원하는 재료, 스타일, 색상, 조명 및 환경을 설명하십시오. 편집 인코더는 텍스트와 제어 이미지 모두에 조건을 부여하므로 외관 변화가 발생하면서 구조는 유지됩니다. 부정적 프롬프트를 사용하여 원하지 않는 아티팩트, 낮은 품질, 스타일에 맞지 않는 요소와 같은 것을 억제하십시오. 이미지 편집 조건은 프롬프트가 매우 스타일링된 경우에도 실루엣 충실도를 유지하는 데 도움이 됩니다.
기본 모델 로드 및 Canny Control LoRA 적용 (UNETLoader (#3) 및 canny control LoRA (#4))#
MOSS-Image-SFT의 UNet은 생성 백본을 제공합니다. 그런 다음 Canny Control LoRA가 모델에 적용되어 엣지 기반 가이드가 디노이징 궤적에 영향을 미칩니다. 이들은 윤곽선에서 구조적 제어를 프롬프트의 의미적 의도와 결합하여 수동 마스크 없이 충실한 재스타일링을 가능하게 합니다.
샘플링 및 디코딩 (KSampler (#11) 및 VAEDecode (#12))#
샘플링은 긍정적 및 부정적 조건에 따라 잠재 이미지를 생성합니다. 고정 시드를 사용하여 결과를 반복 가능하게 유지하거나 변경하여 대안을 탐색할 수 있습니다. 샘플링 후 VAE는 잠재를 미리보기 및 내보내기를 위한 RGB 이미지로 디코딩합니다. 선에 대한 과도한 경직성이 보이면 LoRA 영향을 줄이거나 샘플링 중 창의적 자유를 늘려 제어를 완화하십시오; 드리프트가 보이면 반대로 하십시오.
출력 검토 (Result (#14))#
결과 미리보기를 검사하십시오. 실루엣이 정확하지만 세부 사항이 요구 사항을 놓친 경우, 긍정적 프롬프트를 세분화하십시오; 구조가 드리프트하면 구조적 제어를 강화하거나 프롬프트를 단순화하십시오. 재료, 분위기 및 기하학이 목표에 맞을 때까지 반복하십시오.
Comfyui MOSS-Image Canny Control ComfyUI 워크플로우의 주요 노드#
canny control (#2)#
전체 실행을 위한 구조 사전으로 작용하는 엣지 맵을 생성합니다. 낮은 및 높은 임계값을 조정하여 어떤 윤곽이 살아남는지 변경합니다: 높은 임계값은 주요 윤곽을 강조하고, 낮은 임계값은 세부 사항을 허용합니다. 미리보기를 사용하여 엣지가 물체의 실루엣을 잡아내는지 확인하십시오. 구현 참조: comfyui_controlnet_aux.
canny control LoRA (#4)#
기본 모델에 Canny Control LoRA를 적용하여 샘플러가 엣지 맵을 따르도록 합니다. 윤곽에 엄격하게 맞추고 싶을 때는 LoRA 강도를 증가시키고, 느슨하고 창의적인 기하학을 원할 때는 줄이십시오. 이 균형은 구조적 충실도와 스타일적 자유를 맞추는 데 중요합니다. 모델 카드: thedeoxen/MOSS-Image-canny-controlnet.
Text Encode MOSS-Image Edit (positive) (#8)#
주요 프롬프트를 인코딩하여 텍스트와 제어 이미지 모두에 조건을 부여하여 편집 인식 생성을 지원합니다. 표면 재료, 마감, 브랜드 중립적 형태 단서, 조명 품질, 환경과 같은 구체적인 설명에 집중하십시오. 모델이 색상이나 질감을 충분히 지정하지 않으면 명시적인 형용사와 카메라 언어를 추가하십시오. 기본 모델 참조: OpenMOSS-Team/MOSS-Image-SFT.
Text Encode MOSS-Image Edit (negative) (#9)#
원치 않는 기능에서 샘플러를 멀리하기 위해 부정적 용어를 인코딩합니다. 낮은 품질, 아티팩트, 주제에 맞지 않는 요소, NSFW 용어에 대한 간결한 차단기를 사용하십시오. 타이트한 부정어는 샘플러가 원하지 않는 일반적인 실수를 수정하는 대신 원하는 외관에 용량을 투자하도록 도와줍니다.
KSampler (#11)#
조건 및 잠재 노이즈를 이미지로 변환하는 디노이징 프로세스를 실행합니다. 주요 레버는 재현성을 위한 시드, 질감 및 세부 사항 특성을 위한 샘플러 알고리즘, 정제를 위한 단계 수, 현실성에 대한 프롬프트 강도를 맞추기 위한 가이드 스케일, 결과가 제어를 얼마나 엄격하게 따르는지를 변동하는 디노이즈 강도입니다. 의심스러울 때는 시드를 잠그고 한 번에 하나의 레버를 조정하여 효과를 이해하십시오. 프로젝트 참조: ComfyUI.
선택적 추가 사항#
- 선명하고 중간 대비 제품 사진으로 시작하십시오; 모션 블러와 혼잡한 배경을 피하여 Canny가 깨끗한 실루엣을 추출할 수 있도록 하십시오.
- 구조가 완벽하지만 분위기가 맞지 않으면, 시드를 유지하고 프롬프트만 세분화하십시오; 구조가 드리프트하면 LoRA 강도를 조정하거나 디노이즈를 더 많은 제어로 향하게 하십시오.
- 프롬프트에서 구성 앵커를 언급하여 (“동일한 중앙 실루엣” 등) 제어 이미지와 싸우지 않고 레이아웃을 강화하십시오.
- 원하는 비율에 맞게 참조를 미리 자르십시오; 캔버스는 제어 이미지에 자동으로 맞춰집니다.
- 세부 기계적 세부 사항의 경우, 약간 더 풍부한 엣지를 허용하십시오; 광범위한 재스타일의 경우, 텍스처를 과도하게 제약하지 않도록 희박한 엣지를 선호하십시오.
이 MOSS-Image Canny Control ComfyUI 워크플로우는 유연한 스타일링과 정밀한 구조적 제어를 제공하여 제품, 차량 및 건축물 전반에 걸쳐 빠르고 반복 가능한 재스타일링을 위한 신뢰할 수 있는 도구로 만듭니다.
감사의 말#
이 워크플로우는 다음 작업 및 리소스를 구현하고 확장합니다. 우리는 MOSS-Image-canny-controlnet (Canny Control LoRA 및 워크플로우) 및 MOSS-Image-SFT (기본 모델)와 comfyui_controlnet_aux (Canny 전처리기 노드)를 제공하는 thedeoxen, OpenMOSS-Team 및 Fannovel16의 기여 및 유지 관리에 감사를 표합니다. 권위 있는 세부 사항은 아래에 링크된 원본 문서 및 레포지토리를 참조하십시오.
리소스#
- thedeoxen/MOSS-Image-canny-controlnet
- Hugging Face: thedeoxen/MOSS-Image-canny-controlnet
- OpenMOSS-Team/MOSS-Image-SFT
- Hugging Face: OpenMOSS-Team/MOSS-Image-SFT
- Fannovel16/comfyui_controlnet_aux
참고: 참조된 모델, 데이터셋 및 코드의 사용은 저자와 유지 관리자가 제공하는 해당 라이선스 및 조건에 따릅니다.
