Descrição do Workflow Wan 2.1 no ComfyUI
1. O que é o Wan 2.1?
O workflow ComfyUI Wan 2.1 é um pipeline de geração de vídeo de ponta que utiliza os modelos mais recentes do Wan 2.1 para criar vídeos de alta qualidade a partir de prompts de texto ou/imagens base. O Wan 2.1 suporta geração de Texto-para-Vídeo (T2V) e Imagem-para-Vídeo (I2V), produzindo vídeos de 5 segundos com movimento natural e qualidade profissional. O Wan 2.1 estabelece um novo padrão para geração de vídeo por IA, superando alternativas open-source e comerciais. O modelo Wan 2.1 14B leva os limites ainda mais longe, entregando resultados excepcionais até 720P.
2. Benefícios e Capacidades do Wan 2.1
- Saída de alta qualidade: Gera vídeos de 480P a 720P com movimento realista e texturas de alta fidelidade.
- Acessibilidade de hardware: O modelo leve Wan 2.1 1.3B requer apenas 8.19GB de VRAM, tornando-o compatível com a maioria das GPUs modernas (fornecidas pela RunComfy aqui!).
- Geração versátil: O Wan 2.1 suporta fluxos de trabalho de Texto-para-Vídeo (T2V) e Imagem-para-Vídeo (I2V).
- Suporte multilíngue: O Wan 2.1 é o primeiro modelo de vídeo capaz de gerar texto em chinês e inglês dentro dos vídeos.
- Eficiência VAE: O backend Wan-VAE lida eficientemente com vídeos em 1080P enquanto preserva a consistência temporal.
- Processamento rápido: O modelo Wan 2.1 1.3B entrega resultados rápidos mantendo a qualidade.
3. Como Usar o Wan 2.1
3.1 Métodos de Geração Wan 2.1
Método Primário de Geração Wan 2.1 (desativado por padrão): Texto-para-Vídeo
- Entradas: Prompt de texto
- Melhor para: Criar vídeos do zero usando descrições textuais
- Características:
- Usa o modelo Wan 2.1 1.3B para geração mais rápida
- Cria vídeos de 33 quadros (5 segundos) com resolução de 480P
- Otimizado para movimento suave em clipes curtos
Método Avançado Wan 2.1 (ativado por padrão): Imagem-para-Vídeo com Prompt de Texto
- Entradas: Imagem base + prompt de texto
- Melhor para: Animar imagens estáticas enquanto guia o movimento com um prompt
- Características:
- Preserva elementos visuais da imagem de entrada
- Permite controle de texto sobre a direção do movimento
- Usa o modelo Wan 2.1 14B para maior fidelidade
- Cria vídeos de 33 quadros com resolução de 512x512
Exemplo de Workflow:
- Em CLIPTextEncode (Prompt Positivo / Prompt Negativo): Insira a descrição da sua cena (por exemplo, "uma raposa se movendo rapidamente em uma bela paisagem de inverno com árvores e montanhas durante o dia, câmera em movimento").
- Em Load Image: Carregue sua imagem base.
- Para refinamento adicional (opcional):
- Em KSampler: Ajuste
steps (padrão: 30) para um equilíbrio entre qualidade e velocidade.
- Em ModelSamplingSD3: Modifique o valor
scale (padrão: 8) para aderência ao prompt.
- Clique em Queue Prompt para iniciar a geração.
- Em SaveAnimatedWEBP encontre sua pré-visualização de saída (também salva na pasta ComfyUI > Output).
3.2 Referência de Parâmetros para Wan 2.1
- KSampler:
steps: 20-30 (valores mais altos melhoram a qualidade mas aumentam o tempo)cfg: 6.0 (controla a força de aderência ao prompt)scheduler: "simple" (determina a abordagem de agendamento de ruído)sampler_name: "uni_pc" (amostrador recomendado para Wan 2.1)
- WanImageToVideo:
width/height: 512 (resolução de saída)length: 33 (quadros por vídeo)batch_size: 1 (número de vídeos por execução)
- ModelSamplingSD3:
scale: 8 (controla a aderência à orientação)
- EmptyHunyuanLatentVideo:
width/height: 832/480 (resolução de saída T2V)length: 33 (quadros por vídeo)batch_size: 1 (número de vídeos por execução)
- Otimização de Memória:
- Use o modelo Wan 2.1 1.3B para geração mais rápida com menores requisitos de VRAM.
- Reduza a resolução (por exemplo, 512x320) para processamento mais rápido.
- Diminua a contagem de quadros para renderizações mais curtas e rápidas.
- Otimização de Qualidade:
- Use o modelo Wan 2.1 14B para saída de maior qualidade.
- Aumente os passos do KSampler para 30-40 para resultados mais refinados.
- Utilize Imagem-para-Vídeo com uma imagem base de alta qualidade para a melhor fidelidade.
Para mais detalhes sobre o Wan 2.1, visite o repositório Wan-Video no GitHub.
Créditos
O modelo Wan 2.1 foi desenvolvido pela Equipe Wan, e a integração com ComfyUI foi criada pelos desenvolvedores originais. Todo o crédito vai para esses inovadores por avançar a geração de vídeo por IA.
