DiffuEraser | Pintura de Vídeo

Descrição do Fluxo de Trabalho de Pintura de Vídeo ComfyUI DiffuEraser

O que é o Fluxo de Trabalho ComfyUI DiffuEraser?

DiffuEraser é uma solução de pintura de vídeo de ponta que remove perfeitamente objetos indesejados de vídeos enquanto preserva a consistência temporal. Usando um poderoso modelo de pintura baseado em difusão, o DiffuEraser reconstrói áreas ausentes com conteúdo contextualmente preciso. Este fluxo de trabalho integra-se com Segment Anything 2 (SAM2) para geração automática de máscaras, eliminando a necessidade de máscaras criadas manualmente.

O DiffuEraser utiliza um UNet de remoção de ruído juntamente com um ramo auxiliar BrushNet, integrando atenção temporal para manter a consistência dos quadros. Ao aproveitar informações anteriores, ele reduz alucinações e artefatos, garantindo a remoção impecável de objetos.

A pela Runcomfy Crew automatiza a criação de máscaras usando uma interface de seleção de pontos, permitindo que os usuários marquem objetos para remoção sem criar máscaras manualmente. Isso simplifica significativamente o fluxo de trabalho de pintura.

Benefícios do Fluxo de Trabalho DiffuEraser

• Reconstrução de alta qualidade com mistura natural de cena.
• Geração automática de máscaras via SAM2, reduzindo o esforço manual.
• Consistência temporal para pintura contínua entre quadros.
• Seleção de objetos flexível com uma interface baseada em pontos.
• Resultados de nível profissional com entrada mínima do usuário.
• Alucinações suprimidas aproveitando informações anteriores.
• Compatível com formatos de vídeo padrão para integração sem esforço.

Como Usar o Fluxo de Trabalho DiffuEraser

Remoção de Objetos com DiffuEraser

Método de Geração Primária: SAM2 + DiffuEraser

• Entradas: Vídeo original, quadros para seleção de objetos via coordenadas de pontos
• Melhor para: Remover objetos, pessoas, marcas d'água ou outros elementos indesejados
• Características:
  • Usa SAM2 para geração automática de máscaras
  • Produz pintura natural com alta fidelidade visual
  • Garante consistência temporal em todos os quadros

Exemplo de Fluxo de Trabalho

1. Prepare as entradas
   • Em Load Video Node: Carregue seu vídeo de origem
   • Em Points Editor: Carregue o primeiro quadro para adicionar pontos positivos (verde) para marcar objetos para remoção
2. Refinamento (Opcional)
   • Em DiffuEraserSampler ajuste mask_dilation_iter para mascaramento preciso
   • Modifique crf em Video Combine para maior qualidade de saída
3. Saída
   • Em Video Combine: encontre a visualização e salve-a em sua máquina local

Método Alternativo: Criação Manual de Máscara

• Entradas: Vídeo de máscara pré-criado.
• Melhor para: Usuários que precisam de controle preciso sobre regiões mascaradas.
• Características:
  • Requer criação manual de máscara.
  • Oferece controle total sobre a seleção de objetos.
  • Ideal para cenas complexas ou fluxos de trabalho artísticos.

Referência de Parâmetros para DiffuEraser

• DiffuEraserLoader:
  • checkpoint: [SD1.5/v1-5-pruned-emaonly.ckpt] - Modelo base do Stable Diffusion.
  • lora: [flux/flux.1-turbo-alpha/diffusion_pytorch_model.safetensors] - LoRA para pintura aprimorada.
• DiffuEraserSampler:
  • seed: [random] - Controla a variabilidade da geração.
  • num_inference_steps: [2] - Valores mais altos melhoram a qualidade.
  • guidance_scale: [0] - Controla a aderência às informações anteriores.
  • video_length: [10] - Define quadros processados.
  • mask_dilation_iter: [8] - Expande a cobertura da máscara.
  • ref_stride: [10] - Passo de quadros de referência para consistência temporal.
  • neighbor_length: [10] - Define quadros usados para referência.
  • subvideo_length: [50] - Máximo de quadros processados em um lote.
  • seg_repo: [briaai/RMBG-2.0] - Modelo de remoção de fundo.
• Video Combine:
  • frame_rate: [1] - Corresponde à taxa de quadros de origem.
  • format: [video/h264-mp4] - Formato de saída.
  • crf: [19] - Controla a qualidade da compressão de vídeo.

Otimização Avançada com DiffuEraser

• Otimização de Desempenho:
  • Reduza subvideo_length para processamento mais rápido.
  • Abaixe num_inference_steps para acelerar a geração.
• Melhorias de Qualidade:
  • Aumente mask_dilation_iter para melhorar a cobertura da máscara.
  • Ajuste neighbor_length para refinamentos de objetos em movimento.

Dicas de Uso

1. Use o Points Editor para marcar vários pontos no objeto alvo.
2. Adicione pontos negativos (vermelho) se o SAM2 incluir áreas indesejadas.
3. Para objetos em movimento, marque pontos em vários quadros.
4. Fundos mais simples produzem melhores resultados de pintura.
5. Reduza video_length e subvideo_length para vídeos mais longos para evitar problemas de memória.

Mais Informações

• Para guias detalhados e atualizações sobre o DiffuEraser, visite
• Para integração ComfyUI do DiffuEraser, visite
• Para guias detalhados sobre SAM2, visite

Crédito aos Autores Originais

DiffuEraser foi criado por Xiaowen Li, Haolan Xue, Peiran Ren e Liefeng Bo do Tongyi Lab, Alibaba Group, com integração ComfyUI por smthemex. A Runcomfy Crew aprimorou o fluxo de trabalho com geração automática de máscaras via SAM2. Todo o crédito vai para os autores originais por suas contribuições inovadoras.