Qwen Edit 2511 LoRA Inferencia: ediciones consistentes con el entrenamiento de AI Toolkit en ComfyUI

La Inferencia de Qwen Edit 2511 LoRA es un flujo de trabajo de RunComfy listo para ejecutar que aplica un AI Toolkit–entrenado LoRA en Qwen Image Edit Plus 2511 dentro de ComfyUI con comportamiento coincidente con el entrenamiento. Está construido alrededor de RC Qwen Image Edit Plus 2511 (RCQwenImageEditPlus2511)—un nodo personalizado de código abierto construido por RunComfy (source) que dirige la edición a través de una tubería de inferencia específica de Qwen (en lugar de un gráfico de muestreo genérico), mientras carga tu adaptador a través de lora_path y lora_scale.

Por qué la Inferencia de Qwen Edit 2511 LoRA a menudo se ve diferente en ComfyUI

Las imágenes de vista previa de AI Toolkit provienen de una tubería de edición específica de Qwen Image Edit Plus 2511, incluyendo cómo se codifica el prompt contra la imagen de control y cómo se aplica la guía. Si reconstruyes la misma tarea como un gráfico de muestreo genérico de ComfyUI, los valores predeterminados pueden cambiar y el LoRA puede terminar parcheando una parte diferente de la pila, por lo que coincidir prompt/pasos/semilla aún no garantiza ediciones coincidentes. Cuando los resultados divergen, generalmente es un desajuste a nivel de tubería en lugar de un solo parámetro que olvidaste.

Qué hace el nodo personalizado RCQwenImageEditPlus2511

RCQwenImageEditPlus2511 dirige la edición de Qwen Image Edit Plus 2511 a través de una tubería de inferencia alineada con la vista previa y aplica tu adaptador de AI Toolkit a través de lora_path / lora_scale dentro de esa tubería para mantener la inferencia consistente con las vistas previas del entrenamiento. Implementación de referencia: `src/pipelines/qwen_image.py`.

Cómo usar el flujo de trabajo de Inferencia de Qwen Edit 2511 LoRA

Paso 1: Importa tu LoRA (2 opciones)

• Opción A (resultado de entrenamiento de RunComfy): RunComfy → Trainer → LoRA Assets → encuentra tu LoRA → ⋮ → Copiar Enlace de LoRA
  
• Opción B (AI Toolkit LoRA entrenado fuera de RunComfy): Copia un enlace de descarga directa .safetensors para tu LoRA y pega esa URL en lora_path (no es necesario descargar en ComfyUI/models/loras).

Paso 2: Configura el nodo personalizado RCQwenImageEditPlus2511 para la Inferencia de Qwen Edit 2511 LoRA

Pega tu enlace de LoRA en lora_path en RCQwenImageEditPlus2511 (ya sea el enlace de LoRA de RunComfy de la Opción A, o una URL directa .safetensors de la Opción B).

Luego establece el resto de los parámetros del nodo (coincide tus valores de vista previa/muestra de AI Toolkit cuando estés comparando resultados):

• prompt: la instrucción de edición (incluye tus tokens de activación de entrenamiento si tu LoRA los usa)
• negative_prompt: opcional; déjalo vacío si no usaste negativos en las vistas previas
• width / height: tamaño de salida (se recomiendan múltiplos de 32 para esta tubería)
• sample_steps: pasos de inferencia (comienza por reflejar tu cuenta de pasos de vista previa; 25 es un punto de partida común)
• guidance_scale: fuerza de la guía (Qwen usa una escala "true CFG"; valida el valor que coincide con la vista previa antes de ajustar)
• seed: semilla fija para ediciones repetibles mientras diagnosticas la alineación estableciendo el control_after_generate en 'fixed'
• lora_scale: fuerza del LoRA (comienza en tu fuerza de vista previa, luego ajusta gradualmente)

Este flujo de trabajo es una configuración de edición de imágenes, por lo que también requiere una imagen de entrada:

• control_image (entrada requerida): conecta un nodo LoadImage a control_image, y reemplaza la imagen de muestra con la foto que deseas editar.

Nota de alineación del entrenamiento: si cambiaste la configuración de muestreo durante el entrenamiento, abre tu YAML de entrenamiento de AI Toolkit y refleja width, height, sample_steps, guidance_scale, seed, y lora_scale. Si entrenaste en RunComfy, ve a Trainer → LoRA Assets → Config y copia los valores de vista previa en RCQwenImageEditPlus2511.

Paso 3: Ejecuta la Inferencia de Qwen Edit 2511 LoRA

Haz clic en Queue/Run. El nodo SaveImage escribe el resultado editado en tu directorio de salida estándar de ComfyUI.

Solución de problemas de la Inferencia de Qwen Edit 2511 LoRA

La mayoría de los problemas que las personas encuentran después de entrenar un Qwen-Image-Edit-2511 LoRA en Ostris AI Toolkit aparecen en el momento de la inferencia debido a desajuste de tubería—el muestreador de vista previa de AI Toolkit es específico del modelo/tubería, mientras que muchos gráficos de ComfyUI (o backends acelerados) no lo son.

El nodo personalizado RC Qwen Image Edit Plus 2511 (RCQwenImageEditPlus2511) de RunComfy está construido para mantener la inferencia alineada con la tubería con el muestreo de vista previa al estilo de AI Toolkit.

（1）qwen image edit no soporta la carga de Lora

Por qué sucede esto

Algunas rutas aceleradas de Qwen Image Edit (por ejemplo, la ruta de Qwen Image Edit de Nunchaku) no parchean actualmente los pesos de LoRA de la misma manera que la tubería oficial de edición de Qwen espera. El síntoma habitual es fallo en la carga de pesos / clave de lora no cargada y el adaptador tiene poco o ningún efecto visible.

Cómo solucionarlo (enfoque consistente con el entrenamiento)

• Si estás ejecutando Qwen Image Edit a través de Nunchaku, cambia a un flujo de trabajo de Qwen Image Edit 2511 no-Nunchaku para la validación de LoRA (esto fue reportado como no soportado para la carga de LoRA en el problema).
• En RunComfy, valida tu adaptador a través de RCQwenImageEditPlus2511 primero e inyecta el LoRA solo a través de lora_path + lora_scale (evita apilar una ruta de carga de LoRA adicional encima del nodo RC).
• Mantén la misma imagen de control, seed, sample_steps, guidance_scale, y width/height fijos mientras comparas con las vistas previas de AI Toolkit.

（2）Pregunta sobre la advertencia de carga de qwen-image-edit-2511

Por qué sucede esto

Qwen-Image-Edit-2511 introduce nuevos campos de configuración (notablemente zero_cond_t). Si tu tiempo de ejecución local está atrasado con respecto al soporte de la biblioteca esperado por el modelo, puedes ver advertencias como: config attribute zero_cond_t was passed ... but is ignored Eso es una señal fuerte de que los valores predeterminados de tu tubería pueden no coincidir con el muestreador de vista previa con el que entrenaste/validaste.

Cómo solucionarlo (camino de actualización conocido y funcional)

• Actualiza a una compilación de Diffusers/stack que incluya soporte para Qwen-Image-Edit-2511. Una solución comúnmente compartida en el ecosistema de AI Toolkit es instalar Diffusers desde GitHub main para la compatibilidad con Qwen Edit 2511 (ver el PR de soporte): https://github.com/ostris/ai-toolkit/pull/611
• Luego vuelve a probar a través de RCQwenImageEditPlus2511 (alineado con la tubería) mientras reflejas tus valores de vista previa (sample_steps, guidance_scale, seed, lora_scale, width/height).

（3）--zero_cond_t # Este es un parámetro especial introducido por Qwen-Image-Edit-2511. Por favor, habilítalo para este modelo.

Por qué sucede esto

Algunas pilas de entrenamiento/inferencia de Qwen Edit 2511 requieren que zero_cond_t esté habilitado para coincidir con el comportamiento de condicionamiento/guía previsto. Si tus vistas previas de entrenamiento se produjeron con una configuración y tus inferencia de ComfyUI se ejecutan con otra, las ediciones pueden parecer "desactivadas" incluso si el prompt/semilla/pasos coinciden.

Cómo solucionarlo (comportamiento coincidente con el entrenamiento)

• Asegúrate de que tu muestreador de vista previa de entrenamiento y tu tubería de inferencia estén usando la misma configuración de Qwen Edit 2511 (incluyendo zero_cond_t cuando tu pila lo exponga).
• Para la inferencia de ComfyUI, prefiere RCQwenImageEditPlus2511 para que la tubería de edición se mantenga alineada con la tubería, y el LoRA se inyecte donde la tubería al estilo de vista previa lo espera (a través de lora_path / lora_scale).

（4）Qwen Image Edit 2511 - Degradación de salida cuadrada en la edición de una sola imagen

Por qué sucede esto

Los usuarios informan que Qwen-Image-Edit-2511 puede perder coherencia en salidas cuadradas (por ejemplo, 1024×1024) para ciertas ediciones, mientras que proporciones de aspecto no cuadradas producen resultados notablemente más limpios y fieles, incluso con la misma semilla/prompt/configuración.

Cómo solucionarlo (solución informada por el usuario)

• Al validar tu LoRA, prueba una salida no cuadrada (por ejemplo, 832×1216 o 1216×832) mientras mantienes la misma seed, sample_steps, guidance_scale, y la imagen de control.
• Una vez que encuentres una proporción de aspecto que coincida con tus expectativas de vista previa, mantén esa proporción fija y solo entonces comienza a ajustar lora_scale.

Ejecuta la Inferencia de Qwen Edit 2511 LoRA ahora

Abre el flujo de trabajo, establece lora_path, conecta tu control_image, y ejecuta RCQwenImageEditPlus2511 para mantener las ediciones de ComfyUI alineadas con tus vistas previas de entrenamiento de AI Toolkit.