Wan2.2 Transferencia de Acción Animada V7 | Creador de Videos de Movimiento AI

Wan2.2 Transferencia de Acción Animada V7: Flujo de Trabajo de Video de Movimiento a Personaje para ComfyUI#

Wan2.2 Transferencia de Acción Animada V7 es un flujo de trabajo de video de ComfyUI para transferir movimiento de un video de referencia a un personaje o imagen objetivo mientras se preserva la identidad, el encuadre y el estilo. Construido alrededor de Wan2.2 Animate con pose, cara, visión CLIP, Uni3C ControlNet y guía apilada Wan LoRA, produce un MP4 listo para editar o publicar.

Este flujo de trabajo de Wan2.2 Transferencia de Acción Animada es ideal para creadores que desean una configuración de transferencia de acción lista para RunComfy con entradas de ejemplo y resultados consistentes y repetibles. Maneja el acondicionamiento de pose y cara, guía opcional de cámara, utilidades de marco y aspecto, y paso de audio para que puedas centrarte en dirigir el rendimiento y la apariencia.

Modelos clave en el flujo de trabajo ComfyUI Wan2.2 Transferencia de Acción Animada#

• Wan2.2 Animate 14B. El modelo de difusión de video central que genera cuadros consistentes en movimiento condicionados por identidad, pose y incrustaciones de texto. Model card
• Wan Video VAE (Wan 2.1). Codificación/decodificación latente de alta calidad para cuadros de video que equilibra detalle y velocidad en ComfyUI. Assets
• Codificador de Visión CLIP (ViT-H/14 a través de OpenCLIP). Extrae pistas de identidad y composición de la imagen objetivo para mantener el sujeto estable a través de los cuadros. Repo
• ViTPose Cuerpo Completo. Estimación robusta de puntos clave de cuerpo, manos y cara para impulsar una transferencia de acción precisa. Paper
• Detectores YOLOv10. Detección de personas y regiones utilizada para localizar cuerpos antes de la extracción de puntos clave y el mapeo de proporciones. Repo
• Extractor de Cuerpo Completo SDPose. Backend alternativo de puntos clave de cuerpo completo integrado para análisis de pose multi-estrategia. Repo
• Uni3C ControlNet para video (a través de WanVideoWrapper). Guía estructural opcional que estabiliza la cámara y las restricciones de escena durante el renderizado. Repo

Cómo usar el flujo de trabajo ComfyUI Wan2.2 Transferencia de Acción Animada#

A un alto nivel, cargas una imagen de personaje objetivo y un video de referencia, el flujo de trabajo extrae señales de pose y cara, codifica la identidad con la visión CLIP, aplica opcionalmente guía de cámara Uni3C y Wan LoRAs, luego renderiza con Wan2.2 Animate en cuadros y exporta un MP4 con o sin el audio fuente.

Área de entrada#

Carga tu video de referencia en VHS_LoadVideo (#275) y tu imagen de personaje objetivo en LoadImage (#299). El cargador de video gestiona las limitaciones de tasa de cuadros, extracción de audio opcional y controles básicos de selección; el cargador de imágenes se usa como referencia de identidad y encuadre. Las utilidades de aspecto calculan automáticamente el ancho y la altura de tu orientación elegida para que la salida coincida con 16:9 o 9:16 sin distorsiones. Si planeas mantener el audio fuente, déjalo conectado; el exportador recortará o rellenará según lo configurado.

Imagen de referencia#

Este grupo prepara la imagen objetivo para la guía de identidad. ImageResizeKJv2 (#225) alinea la imagen a la resolución de renderizado, CLIPVisionLoader (#178) carga la columna vertebral de visión, y WanVideoClipVisionEncode (#189) produce incrustaciones de visión CLIP. Usa una imagen limpia y bien iluminada con el encuadre deseado; la visión CLIP preserva la identidad del sujeto, las pistas de ropa y la composición para que el video generado siga tu apariencia.

Cálculo de cara y pose#

El flujo de trabajo soporta múltiples líneas de pose para robustez. OnnxDetectionModelLoader (#204) con PoseAndFaceDetection (#235, #249) extrae pose de cuerpo completo más recortes de cara del video de referencia. En paralelo, la detección basada en regiones YOLO (YOLOModelLoader (#327, #387) con BBoxYOLO (#324, #379, #395)) alimenta a SDPoseKeypointExtractor (#326, #383, #384) para puntos clave alternativos. Una ruta de retargeting de proporciones usando BodyRatioMapperProportionTransfer (#388) adapta el movimiento entre diferentes proporciones de cuerpo y renderiza un mapa de pose limpio a través de BodyRatioMapperSDPoseRender (#391). Un interruptor booleano te permite omitir la guía de cara para actores completamente enmascarados o con casco para evitar conflictos de expresión.

Carga de modelos#

WanVideoVAELoader (#277) y WanVideoModelLoader (#287) traen la columna vertebral y VAE de Wan2.2 Animate. Dos nodos WanVideoLoraSelectMulti (#248, #276) te permiten apilar LoRAs para guía de estilo, velocidad, reiluminación o repintado, y WanVideoSetBlockSwap (#290) configura el intercambio de bloques amigable con la memoria para clips largos. WanVideoContextOptions (#270) establece ventanas de contexto temporal y paso para que el modelo vea suficientes cuadros vecinos para mantenerse estable sin suavizar excesivamente la acción.

Guía de cámara y estructura Uni3C#

Cuando necesites un comportamiento de cámara más estable o restricciones de escena, habilita la ruta Uni3C. WanVideoUni3C_ControlnetLoader (#345) carga el modelo de control, WanVideoEncode (#346) convierte cuadros a latentes para el acondicionamiento, y WanVideoUni3C_embeds (#344) genera incrustaciones Uni3C cuya fuerza puedes ajustar. Esta guía se fusiona en la cadena de renderizado principal para estabilizar panorámicas, zooms o escenas de movimiento amplio.

Muestreo y renderizado#

WanVideoAnimateEmbeds (#295) fusiona la identidad de visión CLIP, mapas de pose y recortes de cara en incrustaciones de imagen mientras controlas pose_strength y face_strength. El renderizador principal funciona en dos etapas con WanVideoSampler (#222, #367); un interruptor elige la rama guiada por Uni3C cuando está habilitada, de lo contrario, la rama estándar. Después del muestreo, WanVideoDecode (#246) convierte latentes en imágenes y las utilidades de selección de cuadros las encaminan a la exportación. El flujo de trabajo equilibra la longitud del contexto, el paso y la memoria para que puedas renderizar secuencias largas de manera confiable.

Exportación#

Se incluyen dos exportadores. VideoCombineNode (#330) proporciona una exportación compacta a MP4 con recorte opcional al audio. VHS_VideoCombine (#285) ofrece una interfaz más rica para tasa de cuadros, CRF, pix_fmt y nombramiento de salida; también soporta paso de audio directo. Una utilidad de compresión puede comprimir todos los cuadros si prefieres secuencias de imágenes para trabajo posterior.

Utilidades de lotes y ayudantes#

Un pequeño grupo gestiona las matemáticas de cuadros, repeticiones y conteos para que los lotes de referencia coincidan con la longitud de la secuencia objetivo. Utilidades como ImageFromBatch (#181), ImageBatch (#304), BatchCount+ (#308, #314), y easy mathInt (#309) mantienen las longitudes sincronizadas para un acondicionamiento suave a través del clip. Los nodos de higiene de VRAM limpian la memoria entre pasos pesados para reducir errores de falta de memoria durante renderizados largos.

Nodos clave en el flujo de trabajo ComfyUI Wan2.2 Transferencia de Acción Animada#

• VHS_LoadVideo (#275). Carga el video de referencia y extrae audio. Usa el límite de cuadros al probar o iterar; una vez que bloquees la apariencia y el movimiento, elimina el límite para renderizados de longitud completa. Mantén el FPS original si quieres que el movimiento se sienta idéntico a la fuente, o fuerza un nuevo FPS si necesitas una cadencia de entrega específica.
• WanVideoAnimateEmbeds (#295). Combina señales de identidad (visión CLIP), pose y cara en incrustaciones que impulsan el modelo. Ajusta pose_strength para decidir cuán estrechamente sigue el movimiento a la fuente y face_strength para priorizar la similitud facial; una menor fuerza facial puede ayudar a personajes estilizados, anime o animales.
• WanVideoContextOptions (#270). Configura ventana de contexto temporal, paso y superposición que controlan cuántos cuadros vecinos considera el modelo. Un contexto más grande produce continuidad más suave; un contexto más corto puede preservar cambios nítidos en acción rápida. Mantén configuraciones de contexto consistentes cuando cambies FPS o resolución.
• WanVideoUni3C_embeds (#344). Genera guía opcional de cámara/estructura. Aumenta strength cuando veas tambaleo de cámara o zooms no deseados; disminúyelo si la guía comienza a luchar contra tu encuadre creativo.
• WanVideoLoraSelectMulti (#276). Apila LoRAs de Wan para estilo, velocidad, reiluminación o repintado. Comienza con un LoRA a una fuerza moderada, luego apila adicionales solo según sea necesario; fusionar demasiados LoRAs fuertes puede desestabilizar la identidad.
• WanVideoSampler (#367). El muestreador de difusión principal para Wan2.2 Animate. Interactúan el programador, la fuerza de reducción de ruido y el conteo de pasos; aumentar los pasos mejora el detalle pero cuesta tiempo, mientras que una reducción de ruido mayor aumenta la reescritura de movimiento. Si usas Uni3C, ajusta su fuerza antes de aumentar los pasos.
• PoseAndFaceDetection (#235). Extrae pose de cuerpo completo y recortes de cara del video de referencia. Deja el interruptor de "actor con máscara/casco" apagado a menos que la cara del intérprete esté completamente oculta; habilitarlo en caras visibles puede silenciar las expresiones.
• VHS_VideoCombine (#285). Exportador de MP4 de alta calidad con soporte de audio. Usa trim_to_audio para sincronizar rígidamente el video con música o diálogo y ajusta crf para el compromiso de tamaño/calidad. Mantén pix_fmt en un valor amigable para transmisión si estás entregando a editores o plataformas sociales.

Extras opcionales#

• Prepara entradas: usa una imagen objetivo limpia e iluminada uniformemente y un clip de referencia con mínimo desenfoque de movimiento para los mejores puntos clave.
• Coincide con la relación de aspecto: elige 16:9 o 9:16 temprano; el flujo de trabajo escala automáticamente las imágenes para que el video final no tenga bandas inesperadas.
• Consejos de estabilidad: si ves deriva de brazos o piernas, aumenta pose_strength; si la identidad deriva, aumenta la influencia de visión CLIP o simplifica el apilamiento de LoRA.
• Control de cámara: habilita Uni3C solo cuando necesites estabilización de cámara; mantenerlo apagado a menudo produce el movimiento más cinematográfico cuando la fuente es manual.
• Iteración: renderiza primero rangos cortos de cuadros, luego exporta la secuencia completa una vez que el movimiento y la apariencia estén afinados.

Este flujo de trabajo de Wan2.2 Transferencia de Acción Animada lleva una transferencia de acción confiable a ComfyUI con valores predeterminados prácticos y espacio para crecer. Carga tu imagen y video de referencia, establece fuerza de pose y cara, elige Uni3C si es necesario, y exporta un MP4 pulido.

Agradecimientos#

Este flujo de trabajo implementa y se basa en los siguientes trabajos y recursos. Agradecemos a Wan-AI por el modelo oficial Wan2.2 Animate, a Kijai por los nodos ComfyUI Wan (ComfyUI-WanVideoWrapper y ComfyUI-WanAnimatePreprocess), y a los equipos de RunningHub y RunComfy por los flujos de trabajo compartidos de ComfyUI por sus contribuciones y mantenimiento. Para detalles autorizados, consulta la documentación original y los repositorios enlazados a continuación.

Recursos#

• Fuente del flujo de trabajo RunningHub
  • Documentos / Notas de lanzamiento: Publicación de RunningHub
• Flujo de trabajo guardado en la nube de RunComfy
  • Documentos / Notas de lanzamiento: Flujo de trabajo compartido de RunComfy
• Modelo oficial Wan-AI/Wan2.2 Animate
  • Hugging Face: Wan-AI/Wan2.2-Animate-14B
• Nodos kijai/ComfyUI-WanVideoWrapper
  • GitHub: kijai/ComfyUI-WanVideoWrapper
• Activos del modelo FP8 ComfyUI Wan2.2 Animate de Kijai
  • Hugging Face: Kijai/WanVideo_comfy_fp8_scaled
• Nodos kijai/ComfyUI-WanAnimatePreprocess
  • GitHub: kijai/ComfyUI-WanAnimatePreprocess

Nota: El uso de los modelos, conjuntos de datos y código referenciados está sujeto a las respectivas licencias y términos proporcionados por sus autores y mantenedores.