VACE 14B: Criação e Edição de Vídeo Tudo-em-Um

O que é o Fluxo de Trabalho ComfyUI VACE 14B?

ComfyUI VACE 14B é uma poderosa estrutura unificada que integra várias capacidades de geração e edição de vídeo em um único modelo. Construído sobre a avançada fundação Wan2.1 e desenvolvido pelo Tongyi Lab no Alibaba Group, o ComfyUI VACE permite que criadores realizem 5 tarefas essenciais de manipulação de vídeo sem trocar entre ferramentas especializadas. Este fluxo de trabalho ComfyUI VACE 14B aproveita o poder do modelo de 14B parâmetros para fornecer capacidades de criação e edição de vídeo de alta qualidade através de uma interface intuitiva.

1. Benefícios do ComfyUI VACE 14B

• Solução Tudo-em-Um: O ComfyUI VACE oferece uma estrutura unificada para criação e edição de vídeos sem trocar entre ferramentas
• Saída de Alta Qualidade: Gere vídeos com resolução de até 720p com o poderoso modelo VACE 14B
• Controles Flexíveis: O fluxo de trabalho ComfyUI VACE fornece múltiplas modalidades de entrada incluindo imagens de referência, máscaras, mapas de profundidade e prompts de texto
• Preservação de Identidade: ComfyUI VACE mantém a identidade do sujeito durante transformações e geração ao usar VACE 14B
• Composição de Tarefas: ComfyUI VACE permite que você combine diferentes capacidades para transformações complexas através do VACE 14B

2. Cinco Capacidades Principais no Fluxo de Trabalho ComfyUI VACE 14B

O fluxo de trabalho ComfyUI VACE inclui 5 componentes distintos, cada um especializado para diferentes tarefas de criação e edição de vídeo alimentadas pelo VACE 14B:

1. Imagem de Referência+ControlNet: ComfyUI VACE permite que você troque o personagem principal do seu vídeo por um de uma imagem de referência, mantendo o movimento e a estrutura intactos graças ao VACE 14B
2. Duas Imagens para Vídeo: Com ComfyUI VACE, crie um vídeo combinando dois personagens ou objetos, cada um tirado de uma imagem de referência separada através do VACE 14B
3. Primeiros e últimos quadros: ComfyUI VACE guia precisamente a geração de vídeo definindo tanto os primeiros quanto os últimos quadros, garantindo movimento fluido através dos quadros via VACE 14B
4. Edição de Objetos de Vídeo: ComfyUI VACE permite que você modifique seletivamente objetos específicos dentro dos vídeos enquanto preserva outros utilizando o VACE 14B
5. Expansão de Vídeo: Usando ComfyUI VACE, realize outpainting espacial para ampliar o quadro do vídeo enquanto preserva a coerência visual com a tecnologia VACE 14B

3. Guia de Início Rápido para ComfyUI VACE 14B

3.1 Início Rápido de Imagem de Referência+ControlNet ComfyUI VACE

1. Selecione o grupo de fluxo de trabalho "Imagem de Referência+ControlNet" no ComfyUI VACE
2. Carregue seu vídeo fonte no nó Load Video (Upload)
3. Faça upload de uma imagem de referência do novo sujeito no nó Load Image
   • Dica: Usar imagens de fundo branco muitas vezes resulta em melhor integração do sujeito ao usar VACE 14B
4. Insira prompts descritivos sobre a cena e o estilo desejados
5. Use prompts negativos para evitar elementos indesejados no seu resultado ComfyUI VACE gerado pelo VACE 14B
6. Resolução recomendada: 512x672 recomendada para eficiência de memória com ComfyUI VACE 14B
7. Ajuste os parâmetros de amostragem
8. Clique em "Run" para gerar o vídeo com o estilo/sujeito da imagem de referência usando ComfyUI VACE 14B

3.2 Início Rápido de Duas Imagens para Vídeo ComfyUI VACE

1. Selecione o grupo de fluxo de trabalho "Duas Imagens para Vídeo" no ComfyUI VACE
2. Faça upload da sua primeira imagem de referência para o primeiro nó Load Image
3. Faça upload da sua segunda imagem de referência para o segundo nó Load Image
4. Este método ComfyUI VACE alimentado pelo VACE 14B é particularmente adequado para aplicações de e-commerce e é notável por sua capacidade de renderizar detalhes finos de forma eficaz, incluindo mãos
5. Insira prompts detalhados descrevendo a cena desejada, estilo e as características de movimento ou transição entre as imagens
6. Ajuste frame_rate no nó Video Combine para definir a suavidade do vídeo na sua saída ComfyUI VACE criada pelo VACE 14B
7. Configure os parâmetros de amostragem no nó WanVideo Sampler
8. Clique em "Run" para gerar a transição de vídeo com ComfyUI VACE 14B

3.3 Início Rápido de Primeiros e Últimos Quadros ComfyUI VACE

1. Selecione o grupo de fluxo de trabalho "Primeiros e últimos quadros" na interface ComfyUI VACE
2. Faça upload do seu quadro inicial para o primeiro nó Load Image
3. Faça upload do seu quadro final para o segundo nó Load Image
4. Configure os parâmetros do nó WanVideo VACE Start To End Frame para resultados ótimos do VACE 14B
5. Insira prompts descrevendo o movimento desejado e o estilo de transição para processamento ComfyUI VACE
6. Ajuste os parâmetros de amostragem para refinar a geração do VACE 14B
7. Clique em "Run" para criar um vídeo de transição suave com ComfyUI VACE 14B

3.4 Início Rápido de Edição de Objetos de Vídeo ComfyUI VACE

1. Selecione o grupo de fluxo de trabalho "Edição de Objetos de Vídeo" no ComfyUI VACE
2. Faça upload do seu vídeo fonte usando o nó Load Video (Upload)
3. Tire manualmente uma captura de tela de um quadro do seu vídeo usando qualquer player de vídeo
4. Faça upload deste quadro no nó Points Editor via a entrada bg_image — este quadro será usado para anotação manual de pontos no ComfyUI VACE para processamento VACE 14B
5. Faça upload da imagem de referência do objeto que você deseja inserir ou usar para substituição usando o nó Load Image
6. No Points Editor do ComfyUI VACE, marque as áreas da seguinte forma:
   • Pontos verdes (Shift + Clique Esquerdo): marque áreas a serem modificadas (ex. o objeto a ser substituído)
   • Pontos vermelhos (Shift + Clique Direito): marque áreas a serem preservadas (ex. fundo ou sujeito)
   • Clique Direito em um ponto existente para deletá-lo
7. O módulo S2/SAM2 Segmentation gerará uma máscara com base nas suas anotações
8. (Opcional) Refine a máscara usando o nó Grow Mask With Blur no ComfyUI VACE
9. Insira prompts positivos para descrever o novo objeto ou modificação (ex. "um guarda-chuva vermelho tradicional")
10. Insira prompts negativos para excluir elementos indesejados do seu resultado ComfyUI VACE gerado pelo VACE 14B
11. Clique em "Run" para gerar o vídeo editado com o objeto substituído de acordo com suas entradas usando ComfyUI VACE 14B

3.5 Início Rápido de Expansão de Vídeo ComfyUI VACE

1. Selecione o grupo de fluxo de trabalho "Expansão de Vídeo" no ComfyUI VACE
2. Carregue seu vídeo fonte no nó Load Video (Upload)
3. Configure o nó ImagePad KJ com suas configurações de expansão desejadas
4. Insira prompts descrevendo que conteúdo deve aparecer nas áreas expandidas para processamento ComfyUI VACE através do VACE 14B
5. O ComfyUI VACE aprimorado pelo VACE 14B oferece melhor manuseio de bordas para uma expansão mais contínua
6. Ajuste os parâmetros de amostragem para consistência com o vídeo original
7. Clique em "Run" para criar o vídeo expandido com ComfyUI VACE 14B

4. Parâmetros Principais para ComfyUI VACE 14B

Parâmetros Comuns de Amostragem para ComfyUI VACE:

• strength: 1.0 (padrão para efeito máximo no ComfyUI VACE 14B)
  • Maior = efeito mais forte do algoritmo VACE 14B dentro do ComfyUI VACE
  • Menor = mais preservação do conteúdo original
• guidance: 7-9 (recomendado para resultados ótimos ComfyUI VACE ao usar VACE 14B)
  • Maior = mais fiel às referências/condições, mas menos criativo
  • Menor = mais criativo, mas pode se afastar das referências
• steps: 20-25 (recomendado para ComfyUI VACE 14B)
  • Maior = melhor qualidade, mas geração mais lenta
  • Menor = geração mais rápida, mas potencialmente menor qualidade
• cfg: 4.0 (recomendado para ComfyUI VACE integrado com VACE 14B)
  • Maior = influência mais forte do prompt, mas potencialmente menos resultados naturais
  • Menor = mais natural, mas pode ignorar detalhes do prompt
• seed: 18 (exemplo para ComfyUI VACE 14B)
  • Mesmo seed + mesmas configurações = mesmos resultados
  • Mude para diferentes variações nas suas saídas ComfyUI VACE geradas via VACE 14B
• shift: 5.0 (padrão no ComfyUI VACE 14B)
  • Maior = mais variação de movimento
  • Menor = movimento mais conservador

5. Parâmetros Avançados para ComfyUI VACE 14B

WanVideo VACE:

• num_frames: 29 (padrão para fluxos de trabalho de referência no ComfyUI VACE 14B)
  • Maior = vídeo mais longo, mas mais tempo de processamento
  • Menor = vídeo mais curto, mas geração mais rápida com ComfyUI VACE utilizando VACE 14B
• vace_start_percent: 0.00 (padrão no ComfyUI VACE ao usar VACE 14B)
  • Controla onde no processo de geração o efeito VACE começa
• vace_end_percent: 1.00 (padrão no ComfyUI VACE 14B)
  • Controla onde no processo de geração o efeito VACE termina

WanVideo VACE Start To End Frame:

• num_frames: 40 (padrão no ComfyUI VACE 14B)
  • Maior = transições mais longas e suaves, mas mais tempo de processamento
  • Menor = vídeo mais curto, mas geração mais rápida com ComfyUI VACE alimentado por VACE 14B
• empty_frame_level: 0.50 (padrão para ComfyUI VACE 14B)
  • Maior = quadros intermediários mais criativos
  • Menor = interpolação mais direta

Video Combine in ComfyUI VACE:

• frame_rate: 16 (padrão para ComfyUI VACE com suporte VACE 14B)
  • Maior = movimento mais suave, mas tamanho de arquivo maior
  • Menor = movimento mais entrecortado, mas tamanho de arquivo menor
• format: video/h264-mp4 (padrão no ComfyUI VACE 14B)
• pix_fmt: yuv420p (padrão no ComfyUI VACE com VACE 14B)

Parâmetros Experimentais para ComfyUI VACE 14B:

• cfg_zero_star: true (padrão no ComfyUI VACE trabalhando com VACE 14B)
  • Parâmetro experimental que pode afetar a qualidade da geração
• fresca_scale_high: 1.25 (padrão para ComfyUI VACE 14B)
  • Controla a preservação de detalhes de alta frequência
• fresca_freq_cutoff: 20 (padrão no ComfyUI VACE aprimorado por VACE 14B)
  • Corte de frequência para preservação de detalhes

Agradecimentos

Este fluxo de trabalho ComfyUI VACE 14B é alimentado por VACE (Criação e Edição de Vídeo Tudo-em-Um), desenvolvido por Zeyinzi Jiang, Zhen Han, Chaojie Mao, Jingfeng Zhang, Yulin Pan e Yu Liu no Tongyi Lab, Alibaba Group. A integração ComfyUI VACE utiliza nós e adaptações de Kijai () para implementar o VACE 14B. O artigo de pesquisa original para VACE 14B está disponível em . Esses fluxos de trabalho ComfyUI VACE com VACE 14B também podem ser executados no Ringhub para aqueles sem hardware local adequado.