Qwen Image 2512 LoRA 추론: ComfyUI에서 파이프라인 정렬, 훈련 일치 AI Toolkit 생성

이 프로덕션 준비된 RunComfy 워크플로우는 AI Toolkit으로 훈련된 LoRA를 ComfyUI에서 Qwen Image 2512에 적용하며, 훈련 일치 동작에 초점을 맞춥니다. 핵심은 RC Qwen Image 2512 (RCQwenImage2512)—RunComfy가 구축하고 오픈소스로 공개한 커스텀 노드(소스)로, 일반 샘플러 그래프 대신 Qwen 네이티브 추론 파이프라인을 실행하고 lora_path와 lora_scale을 통해 어댑터를 로드합니다.

ComfyUI에서 Qwen Image 2512 LoRA 추론이 다르게 보이는 이유

AI Toolkit의 Qwen Image 2512 미리보기는 Qwen의 "true CFG" 가이던스 동작과 해당 파이프라인이 컨디셔닝 및 샘플링에 사용하는 기본값을 포함한 모델 전용 파이프라인으로 생성됩니다. 동일한 작업을 표준 ComfyUI 샘플러 그래프로 재구성하면 가이던스 의미와 LoRA 패치 포인트가 달라질 수 있으므로, "동일한 프롬프트 + 동일한 시드 + 동일한 스텝"에서도 다른 결과가 나올 수 있습니다. 실제로 "내 LoRA가 훈련과 일치하지 않는다"는 많은 보고가 하나의 누락된 매개변수가 아닌 파이프라인 불일치에 해당합니다.

RCQwenImage2512는 노드 내부에 Qwen Image 2512 파이프라인을 래핑하고 lora_path와 lora_scale을 통해 해당 파이프라인에서 LoRA를 적용하여 추론을 정렬 상태로 유지합니다. 파이프라인 소스: `src/pipelines/qwen_image.py`.

Qwen Image 2512 LoRA 추론 워크플로우 사용 방법

1단계: 워크플로우 열기

ComfyUI에서 클라우드 워크플로우를 실행합니다.

2단계: LoRA 가져오기 (2가지 옵션)

• 옵션 A (RunComfy 훈련 결과): RunComfy → Trainer → LoRA Assets → LoRA 찾기 → ⋮ → LoRA 링크 복사
  
• 옵션 B (RunComfy 외부에서 훈련된 AI Toolkit LoRA): LoRA의 직접 .safetensors 다운로드 링크를 복사하여 lora_path에 붙여넣기 (ComfyUI/models/loras에 다운로드할 필요 없음)

3단계: Qwen Image 2512 LoRA 추론을 위한 RCQwenImage2512 커스텀 노드 구성

RC Qwen Image 2512 (RCQwenImage2512)의 lora_path에 LoRA 링크를 붙여넣습니다.

그런 다음 나머지 노드 매개변수를 설정합니다 (훈련 중 미리보기/샘플 생성에 사용한 값과 일치시키는 것부터 시작):

• prompt: 양성 프롬프트 (LoRA가 요구하는 트리거 토큰 포함)
• negative_prompt: 선택 사항; 미리보기에서 부정적 프롬프트를 사용하지 않았다면 비워두기
• width / height: 출력 해상도 (이 파이프라인 계열에서는 32의 배수 권장)
• sample_steps: 추론 스텝; 튜닝 전에 미리보기 스텝 수 미러링 (25가 일반적인 기준선)
• guidance_scale: 가이던스 강도 (Qwen은 "true CFG" 스케일을 사용하므로 먼저 미리보기 값을 재사용)
• seed: control_after_generate를 'fixed'로 설정하여 정렬을 검증하는 동안 시드를 고정한 다음, 새로운 샘플을 위해 변경
• lora_scale: LoRA 강도; 미리보기 값 근처에서 시작하여 작은 단위로 조정

이것은 텍스트-이미지 워크플로우이므로 입력 이미지를 제공할 필요가 없습니다.

훈련 정렬 참고: 훈련 중 샘플링을 커스터마이즈한 경우 AI Toolkit 훈련 YAML을 열고 width, height, sample_steps, guidance_scale, seed, lora_scale을 미러링합니다. RunComfy에서 훈련한 경우 Trainer → LoRA Assets → Config를 열고 미리보기/샘플 값을 RCQwenImage2512에 복사한 후 반복합니다.

4단계: Qwen Image 2512 LoRA 추론 실행

Queue/Run을 클릭합니다. SaveImage 노드가 생성된 이미지를 표준 ComfyUI 출력 폴더에 저장합니다.

Qwen Image 2512 LoRA 추론 문제 해결

RunComfy의 RC Qwen Image 2512 (RCQwenImage2512) 커스텀 노드는 다음을 통해 추론을 Qwen Image 2512 미리보기 스타일 샘플링과 파이프라인 정렬 상태로 유지하도록 설계되었습니다:

• 노드 내부에서 Qwen 네이티브 추론 파이프라인을 실행 (일반 샘플러 그래프가 아닌), 그리고
• lora_path + lora_scale을 통해 해당 파이프라인 내부에서 LoRA를 주입 (일관된 패치 포인트).

（1）Qwen-Image LoRA가 ComfyUI에서 작동하지 않는 경우

이 문제가 발생하는 이유

AI Toolkit으로 훈련된 Qwen-Image LoRA가 ComfyUI에서 적용에 실패할 수 있는데, 이는 LoRA 상태 딕셔너리 키 접두사가 ComfyUI 측 로더/추론 경로가 기대하는 것과 일치하지 않기 때문입니다 (따라서 어댑터가 "조용히" 로드되지만 실제로 Qwen 트랜스포머 모듈을 패치하지 않음).

수정 방법 (사용자 검증된 옵션)

• 파이프라인 수준 LoRA 주입을 위해 RCQwenImage2512 사용: lora_path + lora_scale을 통해서만 RCQwenImage2512에서 어댑터를 로드합니다 (디버깅 중에는 추가 LoRA 로더 노드를 쌓지 마세요). 이렇게 하면 LoRA 패치 포인트가 미리보기 스타일 샘플링에서 사용하는 Qwen 파이프라인과 정렬됩니다.
• 비RC 추론 제공자/로더 경로를 사용해야 하는 경우: 사용자 보고된 수정은 LoRA 키 접두사의 첫 번째 세그먼트를 diffusion_model → transformer로 이름을 변경하여 가중치가 예상된 Qwen 트랜스포머 모듈에 매핑되도록 하는 것입니다 (정확한 컨텍스트와 필요한 이유는 이슈를 참조).

（2）qwen image에서 inference_lora_path 사용 시 충돌 패치 (turbo lora로 샘플 생성 허용)

이 문제가 발생하는 이유

일부 사용자가 AI Toolkit의 inference_lora_path 흐름을 통해 Qwen (Qwen-Image-2512 포함)용 추론 LoRA를 로드하려 할 때 충돌이 발생합니다. 이것은 "프롬프트/CFG/시드" 문제가 아닌 추론 로딩 경로 문제입니다.

수정 방법 (사용자 검증됨)

• 이슈에 설명된 패치를 적용하거나 패치가 포함된 버전으로 업데이트합니다. 이슈 작성자는 이 패치가 Qwen용 추론 LoRA 로드 시 충돌을 수정한다고 보고합니다 (정확한 변경 사항과 구성 컨텍스트는 이슈를 참조).
• ComfyUI 추론의 경우 특히: RCQwenImage2512를 선호하고 RC 노드 내부에서 lora_path / lora_scale을 통해 어댑터를 로드합니다. 이렇게 하면 외부 추론 LoRA 로딩 경로에 의존하지 않고 미리보기 스타일 샘플링과 파이프라인이 일관되게 유지됩니다.

（3）ComfyUI에서 SageAttention 2 qwen-image 사용 시 NaN으로 인한 검은 이미지

이 문제가 발생하는 이유

ComfyUI에서 SageAttention으로 Qwen Image를 실행하면 검은 이미지로 변하는 NaN이 생성될 수 있다고 보고되었습니다. 이것은 "내 LoRA가 고장났다"처럼 보일 수 있지만, 실제로는 어텐션 백엔드가 잘못된 값을 생성하는 것입니다—LoRA 동작을 의미 있게 평가하기 전에 파이프라인 실행이 실패합니다.

수정 방법 (사용자 검증됨)

• NaN/검은 출력을 유발하는 경우 Qwen Image에 --use-sage-attention을 사용하지 마세요. 먼저 깨끗한 기준선(검은 출력이 아닌)을 검증한 다음 LoRA 영향을 평가합니다.
• SageAttention 속도 향상이 필요한 경우: CUDA 백엔드 경로를 강제하여 Qwen 검은 출력을 수정합니다. 실제로 이것은 워크플로우 수준 패치(예: "Patch Sage Attention" 노드)를 사용하고 영향을 받는 GPU/아키텍처에서 깨진 Triton 경로를 피하는 CUDA 백엔드 변형을 선택하는 것을 의미합니다.
• 안정적인(검은색이 아닌) 기준선 출력을 확보한 후 width/height/sample_steps/guidance_scale/seed/lora_scale을 일치시키면서 RCQwenImage2512를 통해 Qwen Image 2512 추론을 실행합니다.

지금 Qwen Image 2512 LoRA 추론 실행

공유 워크플로우를 열고, lora_path에 LoRA URL을 붙여넣고, 미리보기 샘플링 값을 일치시킨 후 RCQwenImage2512를 실행하여 ComfyUI에서 훈련 일치 Qwen Image 2512 생성을 수행하세요.