DiffuEraser é uma solução de pintura de vídeo de ponta que remove perfeitamente objetos indesejados de vídeos enquanto preserva a consistência temporal. Usando um poderoso modelo de pintura baseado em difusão, o DiffuEraser reconstrói áreas ausentes com conteúdo contextualmente preciso. Este fluxo de trabalho integra-se com Segment Anything 2 (SAM2) para geração automática de máscaras, eliminando a necessidade de máscaras criadas manualmente.
O DiffuEraser utiliza um UNet de remoção de ruído juntamente com um ramo auxiliar BrushNet, integrando atenção temporal para manter a consistência dos quadros. Ao aproveitar informações anteriores, ele reduz alucinações e artefatos, garantindo a remoção impecável de objetos.
A integração SAM2 pela Runcomfy Crew automatiza a criação de máscaras usando uma interface de seleção de pontos, permitindo que os usuários marquem objetos para remoção sem criar máscaras manualmente. Isso simplifica significativamente o fluxo de trabalho de pintura.
mask_dilation_iter para mascaramento precisocrf em Video Combine para maior qualidade de saída
checkpoint: [SD1.5/v1-5-pruned-emaonly.ckpt] - Modelo base do Stable Diffusion.lora: [flux/flux.1-turbo-alpha/diffusion_pytorch_model.safetensors] - LoRA para pintura aprimorada.seed: [random] - Controla a variabilidade da geração.num_inference_steps: [2] - Valores mais altos melhoram a qualidade.guidance_scale: [0] - Controla a aderência às informações anteriores.video_length: [10] - Define quadros processados.mask_dilation_iter: [8] - Expande a cobertura da máscara.ref_stride: [10] - Passo de quadros de referência para consistência temporal.neighbor_length: [10] - Define quadros usados para referência.subvideo_length: [50] - Máximo de quadros processados em um lote.seg_repo: [briaai/RMBG-2.0] - Modelo de remoção de fundo.frame_rate: [1] - Corresponde à taxa de quadros de origem.format: [video/h264-mp4] - Formato de saída.crf: [19] - Controla a qualidade da compressão de vídeo.subvideo_length para processamento mais rápido.num_inference_steps para acelerar a geração.mask_dilation_iter para melhorar a cobertura da máscara.neighbor_length para refinamentos de objetos em movimento.video_length e subvideo_length para vídeos mais longos para evitar problemas de memória.DiffuEraser foi criado por Xiaowen Li, Haolan Xue, Peiran Ren e Liefeng Bo do Tongyi Lab, Alibaba Group, com integração ComfyUI por smthemex. A Runcomfy Crew aprimorou o fluxo de trabalho com geração automática de máscaras via SAM2. Todo o crédito vai para os autores originais por suas contribuições inovadoras.
RunComfy é a principal ComfyUI plataforma, oferecendo ComfyUI online ambiente e serviços, juntamente com fluxos de trabalho do ComfyUI apresentando visuais impressionantes. RunComfy também oferece AI Playground, permitindo que artistas utilizem as mais recentes ferramentas de AI para criar arte incrível.
