Инференс Qwen Image 2512 LoRA: выровненные по конвейеру, соответствующие обучению генерации AI Toolkit в ComfyUI

Этот готовый к производству рабочий процесс RunComfy применяет обученный AI Toolkit LoRA к Qwen Image 2512 в ComfyUI с акцентом на поведение, соответствующее обучению. Он сосредоточен на RC Qwen Image 2512 (RCQwenImage2512) — созданном RunComfy, открытом исходном узле (source), который запускает инференсный конвейер, специфичный для Qwen (вместо универсального графа сэмплера) и загружает ваш адаптер через lora_path и lora_scale.

Почему инференс Qwen Image 2512 LoRA часто выглядит иначе в ComfyUI

Предпросмотры AI Toolkit для Qwen Image 2512 создаются модельно-специфическим конвейером, включая поведение "true CFG" Qwen и параметры по умолчанию, которые использует этот конвейер для кондиционирования и сэмплинга. Если вы перестраиваете ту же задачу как стандартный граф сэмплера ComfyUI, семантика гида и точка патча LoRA могут измениться — так что "тот же запрос + то же зерно + те же шаги" все равно могут привести к результату, который выглядит по-другому. На практике многие сообщения "мой LoRA не соответствует обучению" являются несоответствиями конвейеров, а не отсутствием одного параметра.

RCQwenImage2512 сохраняет инференс выровненным, оборачивая конвейер Qwen Image 2512 внутри узла и применяя LoRA в этом конвейере через lora_path и lora_scale. Исходный код конвейера: `src/pipelines/qwen_image.py`.

Как использовать рабочий процесс инференса Qwen Image 2512 LoRA

Шаг 1: Откройте рабочий процесс

Запустите облачный рабочий процесс в ComfyUI.

Шаг 2: Импортируйте ваш LoRA (2 варианта)

• Вариант A (результат обучения RunComfy): RunComfy → Trainer → LoRA Assets → найдите ваш LoRA → ⋮ → Копировать ссылку LoRA
  
• Вариант B (AI Toolkit LoRA, обученный вне RunComfy): Скопируйте прямую ссылку для загрузки .safetensors вашего LoRA и вставьте этот URL в lora_path (не требуется загружать в ComfyUI/models/loras)

Шаг 3: Настройте пользовательский узел RCQwenImage2512 для инференса Qwen Image 2512 LoRA

Вставьте вашу ссылку LoRA в lora_path на RC Qwen Image 2512 (RCQwenImage2512).

Затем установите оставшиеся параметры узла (начните с соответствия значениям, которые вы использовали для генерации предпросмотра/образца во время обучения):

• prompt: ваш положительный запрос (включите любые триггерные токены, которые ожидает ваш LoRA)
• negative_prompt: необязательно; оставьте пустым, если вы не использовали отрицательные значения в ваших предпросмотрах
• width / height: разрешение выхода (рекомендуется кратность 32 для этой семейства конвейеров)
• sample_steps: шаги инференса; отразите количество шагов предпросмотра перед настройкой (25 является общим базовым значением)
• guidance_scale: сила гида (Qwen использует шкалу "true CFG", поэтому сначала повторите ваше значение предпросмотра)
• seed: зафиксируйте зерно, пока вы проверяете выравнивание, установив control_after_generate на 'fixed', затем измените его для новых образцов
• lora_scale: сила LoRA; начните около вашего значения предпросмотра и корректируйте небольшими шагами

Это рабочий процесс "текст-к-изображению", поэтому вам не нужно предоставлять входное изображение.

Примечание о выравнивании обучения: если вы настраивали сэмплинг во время обучения, откройте ваш YAML обучения AI Toolkit и отразите width, height, sample_steps, guidance_scale, seed и lora_scale. Если вы обучались в RunComfy, откройте Trainer → LoRA Assets → Config и скопируйте значения предпросмотра/образца в RCQwenImage2512, прежде чем итерации.

Шаг 4: Запустите инференс Qwen Image 2512 LoRA

Нажмите Queue/Run. Узел SaveImage сохраняет сгенерированное изображение в вашу стандартную папку вывода ComfyUI.

Устранение неполадок инференса Qwen Image 2512 LoRA

Пользовательский узел RunComfy RC Qwen Image 2512 (RCQwenImage2512) разработан для поддержания инференса выровненным по конвейеру с предпросмотровым стилем сэмплинга Qwen Image 2512, выполняя:

• выполнение инференсного конвейера, специфичного для Qwen внутри узла (а не универсального графа сэмплера), и
• внедрение LoRA через lora_path + lora_scale внутри этого конвейера (последовательная точка патча).

（1）Qwen-Image Loras не работают в comfyui

Почему это происходит

Пользователи сообщили, что обученные AI Toolkit LoRAs для Qwen-Image могут не применяться в ComfyUI, поскольку префиксы ключей состояния LoRA не соответствуют тому, что ожидает загрузчик/путь инференса на стороне ComfyUI (поэтому адаптер загружается "тихо", но фактически не патчит модули Qwen transformer).

Как исправить (подтвержденные пользователями варианты)

• Используйте RCQwenImage2512 для инъекции LoRA на уровне конвейера: загружайте адаптер только через lora_path + lora_scale на RCQwenImage2512 (избегайте наложения дополнительных узлов загрузчика LoRA при отладке). Это сохраняет точку патча LoRA в соответствии с конвейером Qwen, используемым предпросмотровым стилем сэмплинга.
• Если необходимо использовать не-RC провайдер инференса / путь загрузки: один из вариантов, предложенный пользователем, заключается в переименовании ключей LoRA, заменив первый сегмент префикса ключа LoRA с diffusion_model на transformer, так чтобы веса соответствовали ожидаемым модулям Qwen transformer (см. проблему для точного контекста и почему это необходимо).

（2）Патч для сбоя при использовании inference_lora_path с изображением qwen (позволяет генерировать образцы с turbo lora)

Почему это происходит

Некоторые пользователи сталкиваются с сбоем, когда пытаются загрузить инференсный LoRA для Qwen (включая Qwen-Image-2512) через поток inference_lora_path AI Toolkit. Это не проблема "prompt/CFG/seed" — это проблема пути загрузки инференса.

Как исправить (подтверждено пользователями)

• Примените патч / обновите до версии, которая включает патч, описанный в проблеме. Автор проблемы сообщает, что патч устраняет сбой при загрузке инференсного LoRA для Qwen (см. проблему для точного изменения и контекста конфигурации).
• Для инференса ComfyUI конкретно: предпочтите RCQwenImage2512 и загружайте адаптер через lora_path / lora_scale внутри узла RC. Это позволяет избежать зависимости от внешних маршрутов загрузки инференса LoRA и сохраняет конвейер последовательным с предпросмотровым стилем сэмплинга.

（3）использование sageattention 2 qwen-image в comfyui показывает черные изображения из-за NaNs (т.е. черные изображения)

Почему это происходит

Пользователи сообщили, что запуск Qwen Image в ComfyUI с SageAttention может производить NaNs, которые превращаются в черные изображения. Это может выглядеть как "мой LoRA сломан", но на самом деле это бэкенд внимания, производящий недопустимые значения — выполнение конвейера завершается с ошибкой до того, как вы сможете осмысленно оценить поведение LoRA.

Как исправить (подтверждено пользователями)

• Не используйте --use-sage-attention для Qwen Image, когда это вызывает NaNs/черный вывод. Сначала проверьте чистую базу (нечерный вывод), затем оцените влияние LoRA.
• Если вам нужны ускорения SageAttention: исправьте черный вывод Qwen, принуждая путь бэкенда CUDA. На практике это часто означает использование патча на уровне рабочего процесса (например, узла "Patch Sage Attention") и выбор варианта бэкенда CUDA, который избегает сломанного пути Triton для затронутого GPU/архитектуры.
• После того, как у вас будут стабильные (нечерные) базовые выходы, выполните инференс Qwen Image 2512 через RCQwenImage2512, чтобы конвейер + точка инъекции LoRA оставались выровненными с предпросмотром, пока вы соответствуете width/height/sample_steps/guidance_scale/seed/lora_scale.

Запустите инференс Qwen Image 2512 LoRA сейчас

Откройте общий рабочий процесс, вставьте ваш URL LoRA в lora_path, соответствуйте значениям предпросмотра, и запустите RCQwenImage2512 для генераций Qwen Image 2512, соответствующих обучению, в ComfyUI.