DiffuEraser — это передовое решение для видеозаливки, которое бесшовно удаляет нежелательные объекты из видео, сохраняя временную согласованность. Используя мощную диффузионную модель заливки, DiffuEraser восстанавливает отсутствующие области с контекстуально точным содержанием. Этот рабочий процесс интегрируется с Segment Anything 2 (SAM2) для автоматической генерации масок, устраняя необходимость в вручную созданных масках.
DiffuEraser использует денойзинг UNet вместе с дополнительной ветвью BrushNet, интегрируя временное внимание для поддержания согласованности кадров. Используя предварительную информацию, он уменьшает галлюцинации и артефакты, обеспечивая безупречное удаление объектов.
Интеграция SAM2 от Runcomfy Crew автоматизирует создание масок с помощью интерфейса выбора точек, позволяя пользователям отмечать объекты для удаления без ручного создания масок. Это значительно упрощает рабочий процесс заливки.
mask_dilation_iter
для точного маскированияcrf
в Video Combine для повышения качества выводаcheckpoint
: [SD1.5/v1-5-pruned-emaonly.ckpt] - базовая модель Stable Diffusion.lora
: [flux/flux.1-turbo-alpha/diffusion_pytorch_model.safetensors] - LoRA для улучшенной заливки.seed
: [random] - Управляет вариативностью генерации.num_inference_steps
: [2] - Более высокие значения улучшают качество.guidance_scale
: [0] - Управляет соблюдением предварительной информации.video_length
: [10] - Определяет обрабатываемые кадры.mask_dilation_iter
: [8] - Расширяет покрытие маски.ref_stride
: [10] - Интервал ссылочного кадра для временной согласованности.neighbor_length
: [10] - Определяет кадры, используемые для ссылки.subvideo_length
: [50] - Максимальное количество кадров, обрабатываемых за один раз.seg_repo
: [briaai/RMBG-2.0] - Модель удаления фона.frame_rate
: [1] - Соответствует исходной частоте кадров.format
: [video/h264-mp4] - Формат вывода.crf
: [19] - Контролирует качество сжатия видео.subvideo_length
для более быстрой обработки.num_inference_steps
для ускорения генерации.mask_dilation_iter
для улучшения покрытия маски.neighbor_length
для уточнения движущихся объектов.video_length
и subvideo_length
для более длинных видео, чтобы избежать проблем с памятью.DiffuEraser был создан Xiaowen Li, Haolan Xue, Peiran Ren и Liefeng Bo из Tongyi Lab, Alibaba Group, с интеграцией в ComfyUI от smthemex. Runcomfy Crew улучшил рабочий процесс с помощью автоматической генерации масок через SAM2. Все заслуги принадлежат оригинальным авторам за их революционные достижения.
RunComfy - ведущая ComfyUI платформа, предлагающая ComfyUI онлайн среду и услуги, а также рабочие процессы ComfyUI с потрясающей визуализацией. RunComfy также предоставляет AI Playground, позволяя художникам использовать новейшие инструменты AI для создания невероятного искусства.