logo
RunComfy
ComfyUIPlaygroundPricing
discord logo
ComfyUI>Рабочие процессы>DiffuEraser | Видеозаливка

DiffuEraser | Видеозаливка

Workflow Name: RunComfy/DiffuEraser-SAM2
Workflow ID: 0000...1200
DiffuEraser — это недавно выпущенная модель диффузии для видеозаливки, которая восстанавливает удаленные части с реалистичным содержанием. Она сохраняет естественное движение и тонкие детали между кадрами, используя денойзинг UNet, BrushNet и временное внимание для обеспечения согласованности. Предварительная информация включается для уменьшения шума и подавления галлюцинаций. RunComfy Crew улучшает рабочий процесс, используя Segment Anything 2 (SAM2) для автоматической генерации масок, устраняя необходимость в ручных усилиях. Просто загрузите фильм, выберите элементы и позвольте процессу заняться заливкой. Вместо простого удаления, DiffuEraser воссоздает, легко создавая качественные результаты.

Описание рабочего процесса видеозаливки ComfyUI DiffuEraser

Что такое рабочий процесс ComfyUI DiffuEraser?

DiffuEraser — это передовое решение для видеозаливки, которое бесшовно удаляет нежелательные объекты из видео, сохраняя временную согласованность. Используя мощную диффузионную модель заливки, DiffuEraser восстанавливает отсутствующие области с контекстуально точным содержанием. Этот рабочий процесс интегрируется с Segment Anything 2 (SAM2) для автоматической генерации масок, устраняя необходимость в вручную созданных масках.

DiffuEraser использует денойзинг UNet вместе с дополнительной ветвью BrushNet, интегрируя временное внимание для поддержания согласованности кадров. Используя предварительную информацию, он уменьшает галлюцинации и артефакты, обеспечивая безупречное удаление объектов.

Интеграция SAM2 от Runcomfy Crew автоматизирует создание масок с помощью интерфейса выбора точек, позволяя пользователям отмечать объекты для удаления без ручного создания масок. Это значительно упрощает рабочий процесс заливки.

Преимущества рабочего процесса DiffuEraser

  • Высококачественная реконструкция с естественным смешиванием сцен.
  • Автоматическая генерация масок через SAM2, уменьшая ручные усилия.
  • Временная согласованность для бесшовной заливки между кадрами.
  • Гибкий выбор объектов с интерфейсом на основе точек.
  • Профессиональные результаты с минимальным вводом от пользователя.
  • Подавление галлюцинаций за счет использования предварительной информации.
  • Совместимость со стандартными видеоформатами для легкой интеграции.

Как использовать рабочий процесс DiffuEraser

Удаление объектов с помощью DiffuEraser

Основной метод генерации: SAM2 + DiffuEraser

DiffuEraser

  • Входные данные: Оригинальное видео, кадры для выбора объектов по координатам точек
  • Лучше всего подходит для: Удаления объектов, людей, водяных знаков или других нежелательных элементов
  • Характеристики:
    • Использует SAM2 для автоматической генерации масок
    • Обеспечивает естественную заливку с высокой визуальной точностью
    • Гарантирует временную согласованность во всех кадрах
Пример рабочего процесса
  1. Подготовьте входные данные
    • В Load Video Node: Загрузите исходное видео
    • В Points Editor: Загрузите первый кадр, чтобы добавить положительные точки (зеленые) для обозначения объектов для удаления
  2. Уточнение (по желанию)
    • В DiffuEraserSampler настройте mask_dilation_iter для точного маскирования
    • Измените crf в Video Combine для повышения качества вывода
  3. Вывод
    • В Video Combine: найдите предварительный просмотр и сохраните его на вашем локальном компьютере
Альтернативный метод: Ручное создание масок

DiffuEraser

  • Входные данные: Предварительно созданное видео с масками.
  • Лучше всего подходит для: Пользователей, нуждающихся в точном контроле над маскируемыми областями.
  • Характеристики:
    • Требует ручного создания масок.
    • Предоставляет полный контроль над выбором объектов.
    • Идеально подходит для сложных сцен или художественных рабочих процессов.

Справочник параметров для DiffuEraser

DiffuEraser

  • DiffuEraserLoader:
    • checkpoint: [SD1.5/v1-5-pruned-emaonly.ckpt] - базовая модель Stable Diffusion.
    • lora: [flux/flux.1-turbo-alpha/diffusion_pytorch_model.safetensors] - LoRA для улучшенной заливки.
  • DiffuEraserSampler:
    • seed: [random] - Управляет вариативностью генерации.
    • num_inference_steps: [2] - Более высокие значения улучшают качество.
    • guidance_scale: [0] - Управляет соблюдением предварительной информации.
    • video_length: [10] - Определяет обрабатываемые кадры.
    • mask_dilation_iter: [8] - Расширяет покрытие маски.
    • ref_stride: [10] - Интервал ссылочного кадра для временной согласованности.
    • neighbor_length: [10] - Определяет кадры, используемые для ссылки.
    • subvideo_length: [50] - Максимальное количество кадров, обрабатываемых за один раз.
    • seg_repo: [briaai/RMBG-2.0] - Модель удаления фона.
  • Video Combine:
    • frame_rate: [1] - Соответствует исходной частоте кадров.
    • format: [video/h264-mp4] - Формат вывода.
    • crf: [19] - Контролирует качество сжатия видео.

Расширенная оптимизация с DiffuEraser

  • Оптимизация производительности:
    • Уменьшите subvideo_length для более быстрой обработки.
    • Снизьте num_inference_steps для ускорения генерации.
  • Улучшения качества:
    • Увеличьте mask_dilation_iter для улучшения покрытия маски.
    • Настройте neighbor_length для уточнения движущихся объектов.

Советы по использованию

  1. Используйте Points Editor для обозначения нескольких точек на целевом объекте.
  2. Добавьте отрицательные точки (красные), если SAM2 включает нежелательные области.
  3. Для движущихся объектов отметьте точки на нескольких кадрах.
  4. Более простые фоны дают лучшие результаты заливки.
  5. Уменьшите video_length и subvideo_length для более длинных видео, чтобы избежать проблем с памятью.

Дополнительная информация

  • Для получения подробных руководств и обновлений о DiffuEraser посетите DiffuEraser
  • Для интеграции DiffuEraser в ComfyUI посетите ComfyUI DiffuEraser
  • Для подробных руководств по SAM2 посетите SAM2 на RunComfy

Благодарность оригинальным авторам

DiffuEraser был создан Xiaowen Li, Haolan Xue, Peiran Ren и Liefeng Bo из Tongyi Lab, Alibaba Group, с интеграцией в ComfyUI от smthemex. Runcomfy Crew улучшил рабочий процесс с помощью автоматической генерации масок через SAM2. Все заслуги принадлежат оригинальным авторам за их революционные достижения.

Want More ComfyUI Workflows?

Hunyuan3D-2 | Продвинутый генератор 3D-объектов

Создайте точные текстурированные 3D-объекты из изображений с использованием передовых технологий ИИ.

MV-Adapter | Генератор многовидового изображения высокого разрешения

Создавайте 360-градусные виды всего из одного изображения или описания.

Trellis | Изображение в 3D

Trellis — это продвинутая модель преобразования изображений в 3D для создания высококачественных 3D-объектов.

Wan 2.1 Видео Перестиль | Единообразное Преобразование Стиля Видео

Преобразуйте стиль вашего видео, применив перестиль первого кадра с помощью рабочей схемы Wan 2.1 видео перестиль.

Pyramid Flow | Генерация видео

Включает режимы от текста к видео и от изображения к видео.

Put It Here Kontext | Замена Объектов

Поместите что угодно куда угодно. Kontext делает это реалистично. Работает идеально.

DynamiCrafter | Изображения в видео

Протестировано для зацикленных видео и интерполяции кадров. Лучше, чем закрытые видео генераторы в определённых сценариях

EchoMimic | Анимации портретов, управляемые аудио

Создайте реалистичные говорящие головы и жесты тела, синхронизированные с предоставленным аудио.

Подписывайтесь на нас
  • LinkedIn
  • Facebook
  • Instagram
  • Twitter
Поддержка
  • Discord
  • Email
  • Статус системы
  • партнёр
Ресурсы
  • Бесплатный ComfyUI онлайн
  • Руководства по ComfyUI
  • RunComfy API
  • ComfyUI Уроки
  • ComfyUI Узлы
  • Узнать больше
Юридическая информация
  • Условия обслуживания
  • Политика конфиденциальности
  • Политика в отношении файлов cookie
RunComfy
Авторское право 2025 RunComfy. Все права защищены.

RunComfy - ведущая ComfyUI платформа, предлагающая ComfyUI онлайн среду и услуги, а также рабочие процессы ComfyUI с потрясающей визуализацией. RunComfy также предоставляет AI Playground, позволяя художникам использовать новейшие инструменты AI для создания невероятного искусства.