SeedVR2 | Апскейлер Изображений и Видео

Что такое SeedVR2?#

SeedVR2 — это революционная модель одношагового восстановления видео, разработанная ByteDance Seed, построенная на архитектуре Diffusion Transformer. В отличие от традиционных диффузионных моделей, требующих десятки шагов инференса, SeedVR2 достигает генерации за один шаг, обеспечивая более чем 4-кратное ускорение восстановления видео при сохранении или даже превышении качества многошаговых моделей.

Представьте SeedVR2 как суперинтеллектуального «специалиста по ремонту видео», который может мгновенно превратить размытые видео и изображения низкого разрешения в чёткие, высококачественные результаты за один проход — без необходимости многократной «полировки», которую требуют другие инструменты.

Примечание: Если вы хотите использовать возможности масштабирования видео и ваше входное видео длиннее 30 секунд, пожалуйста, переключитесь на рабочий процесс SeedVR V2.5 и запустите его на машине 2XL или выше. Для справки: обработка 1-минутного видео занимает менее 30 минут на машине 2XL и примерно 20 минут на машине 3XL.

Преимущества ComfyUI SeedVR2#

• Молниеносная Обработка: SeedVR2 достигает одношагового восстановления, устраняя необходимость в затратном по времени многошаговом инференсе
• Исключительное Качество Улучшения: SeedVR2 обеспечивает потрясающие результаты как для задач восстановления изображений, так и видео
• Двухрежимная Функциональность: SeedVR2 обрабатывает как восстановление изображений, так и видео в рамках одного унифицированного рабочего процесса
• Адаптивная Поддержка Разрешения: SeedVR2 обрабатывает произвольные размеры ввода без ограничений разрешения
• Превосходное Восстановление Деталей: SeedVR2 отлично справляется с восстановлением мелких деталей, таких как текст, черты лица и архитектурные элементы
• Эффективное Использование Памяти: Модель SeedVR2 3B обеспечивает отличное соотношение качества к производительности

Как Использовать Рабочий Процесс ComfyUI SeedVR2#

Понимание Двойной Структуры Рабочего Процесса SeedVR2#

Рабочий процесс SeedVR2 состоит из двух отдельных путей обработки:

1. Верхний Путь — Рабочий Процесс Улучшения Изображений SeedVR2
2. Нижний Путь — Рабочий Процесс Улучшения Видео SeedVR2

Оба рабочих процесса SeedVR2 используют одну и ту же базовую технологию SeedVR2 и могут обеспечивать впечатляющие результаты восстановления для различных типов медиа.

Рабочий Процесс Улучшения Изображений SeedVR2 (Верхний Путь)#

Процесс Настройки SeedVR2:

1. Узел Load Image: Загрузите ваше размытое или низкоразрешённое изображение для обработки SeedVR2
2. Узел SeedVR2 Video Upscaler: Настройте параметры улучшения SeedVR2
   • new_width: Установите целевую ширину
   • cfg_scale: Используйте 1.01 для тонкого улучшения SeedVR2 или более высокие значения для более драматичных изменений
   • batch_size: Оставьте 1 для обработки одного изображения SeedVR2
3. Узлы LayerUtility: Рабочий процесс включает инструменты сравнения для оценки результатов SeedVR2 до/после
4. Save Image: Экспортируйте ваш улучшенный результат SeedVR2

Рабочий Процесс Улучшения Видео SeedVR2 (Нижний Путь)#

Процесс Настройки Видео SeedVR2:

1. Узел Load Video: Загрузите ваш видеофайл для обработки SeedVR2
   • Установите подходящие force_rate, custom_width и custom_height для SeedVR2
   • Настройте frame_load_cap для ограничения обработки SeedVR2 при тестировании
   • Используйте select_every_nth для пропуска кадров при необходимости для более быстрой обработки SeedVR2
2. SeedVR2 Video Upscaler: Используйте идентичные настройки SeedVR2, как в рабочем процессе для изображений
3. Узел Video Combine: Компилирует обработанные SeedVR2 кадры обратно в видеоформат
   • frame_rate: Совпадает с частотой кадров вашего входного видео для выхода SeedVR2
   • format: Выберите подходящий выходной формат (mp4 рекомендуется для SeedVR2)
   • crf: Управление качеством сжатия (19 — хороший баланс для SeedVR2)

Руководство по Оптимизации Параметров SeedVR2#

Основные Настройки SeedVR2 для Лучших Результатов:

Выбор Модели SeedVR2:

• seedvr2_ema_3b_fp16.safetensors: Лучший общий выбор SeedVR2 (требует 18GB+ VRAM)
• seedvr2_ema_3b_fp8_e4m3fn.safetensors: Альтернатива SeedVR2 с меньшим потреблением памяти и немного пониженным качеством
• seedvr2_ema_7b_fp16.safetensors: Большая модель SeedVR2 для потенциально лучшего качества (более высокие требования к VRAM)
• seedvr2_ema_7b_fp8_e4m3fn.safetensors: Модель SeedVR2 7B с пониженной точностью
• В настоящее время избегайте моделей SeedVR2 7B из-за сообщённых артефактов вертикальных полос

Контроль Качества SeedVR2:

• cfg_scale: 1.01-1.5 для тонкого улучшения SeedVR2, 2.0-3.0 для агрессивного восстановления SeedVR2
• seed: Экспериментируйте с разными значениями — каждое производит уникальную реконструкцию деталей SeedVR2
• preserve_vram: Всегда включайте, если у вас нет избытка памяти GPU для SeedVR2

Дополнительная Информация о SeedVR2#

Для дополнительных технических деталей и исследовательского контекста SeedVR2:

• Оригинальное исследование SeedVR2 от ByteDance Seed Team
• Реализация ComfyUI SeedVR2 от NumZ
• Домашняя страница проекта SeedVR2 с демонстрациями и сравнениями: SeedVR2 Website

Благодарности#

Этот рабочий процесс работает на SeedVR2, разработанном исследовательской командой ByteDance Seed. Интеграция ComfyUI SeedVR2 предоставлена NumZ, обеспечивая бесшовное одношаговое восстановление видео и изображений в рамках экосистемы ComfyUI. Особое признание оригинальным авторам за их новаторскую работу по обеспечению быстрого и доступного высококачественного восстановления на основе диффузии SeedVR2.