DiffuEraser es una solución de pintado de video de última generación que elimina sin problemas objetos no deseados de videos mientras preserva la consistencia temporal. Usando un poderoso modelo de pintado basado en difusión, DiffuEraser reconstruye áreas faltantes con contenido contextualmente preciso. Este flujo de trabajo se integra con Segment Anything 2 (SAM2) para la generación automática de máscaras, eliminando la necesidad de crear máscaras manualmente.
DiffuEraser utiliza un UNet de eliminación de ruido junto con una rama auxiliar BrushNet, integrando atención temporal para mantener la consistencia entre fotogramas. Al aprovechar la información previa, reduce alucinaciones y artefactos, asegurando una eliminación de objetos impecable.
La integración SAM2 por Runcomfy Crew automatiza la creación de máscaras usando una interfaz de selección de puntos, permitiendo a los usuarios marcar objetos para su eliminación sin crear máscaras manualmente. Esto simplifica significativamente el flujo de trabajo de pintado.
mask_dilation_iter para un enmascaramiento precisocrf en Video Combine para una mayor calidad de salida
checkpoint: [SD1.5/v1-5-pruned-emaonly.ckpt] - Modelo base de Stable Diffusion.lora: [flux/flux.1-turbo-alpha/diffusion_pytorch_model.safetensors] - LoRA para pintado mejorado.seed: [random] - Controla la variabilidad de generación.num_inference_steps: [2] - Valores más altos mejoran la calidad.guidance_scale: [0] - Controla la adherencia a la información previa.video_length: [10] - Define los fotogramas procesados.mask_dilation_iter: [8] - Expande la cobertura de la máscara.ref_stride: [10] - Paso de fotograma de referencia para consistencia temporal.neighbor_length: [10] - Define los fotogramas utilizados para referencia.subvideo_length: [50] - Máximo de fotogramas procesados en un lote.seg_repo: [briaai/RMBG-2.0] - Modelo de eliminación de fondo.frame_rate: [1] - Coincide con la tasa de fotogramas de origen.format: [video/h264-mp4] - Formato de salida.crf: [19] - Controla la calidad de compresión del video.subvideo_length para un procesamiento más rápido.num_inference_steps para acelerar la generación.mask_dilation_iter para mejorar la cobertura de la máscara.neighbor_length para refinamientos de objetos en movimiento.video_length y subvideo_length para videos más largos para evitar problemas de memoria.DiffuEraser fue creado por Xiaowen Li, Haolan Xue, Peiran Ren y Liefeng Bo del Tongyi Lab, Alibaba Group, con integración en ComfyUI por smthemex. Runcomfy Crew mejoró el flujo de trabajo con la generación automática de máscaras a través de SAM2. Todo el crédito va a los autores originales por sus contribuciones innovadoras.
RunComfy es la principal ComfyUI plataforma, ofreciendo ComfyUI en línea entorno y servicios, junto con flujos de trabajo de ComfyUI con impresionantes imágenes. RunComfy también ofrece AI Playground, permitiendo a los artistas aprovechar las últimas herramientas de AI para crear arte increíble.