Описание рабочего процесса ComfyUI Wan 2.1
1. Что такое Wan 2.1?
Рабочий процесс ComfyUI Wan 2.1 — это передовая система генерации видео, использующая новейшие модели Wan 2.1 для создания высококачественных видео из текстовых подсказок и/или базовых изображений. Wan 2.1 поддерживает генерацию Text-to-Video (T2V) и Image-to-Video (I2V), создавая 5-секундные видео с естественным движением и профессиональным качеством. Wan 2.1 устанавливает новый стандарт для генерации видео с использованием ИИ, превосходя как открытые, так и коммерческие альтернативы. Модель Wan 2.1 14B расширяет границы ещё дальше, обеспечивая исключительные результаты до 720P.
2. Преимущества и возможности Wan 2.1
- Высокое качество выхода: Генерирует видео от 480P до 720P с реалистичным движением и высоким качеством текстур.
- Доступность оборудования: Лёгкая модель Wan 2.1 1.3B требует всего 8.19GB VRAM, что делает её совместимой с большинством современных графических процессоров (предоставленных здесь RunComfy!).
- Универсальная генерация: Wan 2.1 поддерживает как Text-to-Video (T2V), так и Image-to-Video (I2V) рабочие процессы.
- Поддержка нескольких языков: Wan 2.1 — первая видеомодель, способная генерировать как китайский, так и английский текст в видео.
- Эффективность VAE: Бэкенд Wan-VAE эффективно обрабатывает 1080P видео, сохраняя временную согласованность.
- Быстрая обработка: Модель Wan 2.1 1.3B обеспечивает быстрые результаты, сохраняя качество.
3. Как использовать Wan 2.1
3.1 Методы генерации Wan 2.1
Основной метод генерации Wan 2.1 (по умолчанию отключен): Text-to-Video
- Входные данные: Текстовая подсказка
- Лучше всего подходит для: Создания видео с нуля, используя текстовые описания
- Характеристики:
- Использует модель Wan 2.1 1.3B для более быстрой генерации
- Создаёт 33-кадровые (5-секундные) видео в разрешении 480P
- Оптимизирован для плавного движения в коротких клипах
Расширенный метод Wan 2.1 (по умолчанию включен): Image-to-Video с текстовой подсказкой
- Входные данные: Базовое изображение + текстовая подсказка
- Лучше всего подходит для: Анимации статических изображений с управлением движением с помощью подсказки
- Характеристики:
- Сохраняет визуальные элементы входного изображения
- Позволяет текстовое управление направлением движения
- Использует модель Wan 2.1 14B для более высокой точности
- Создаёт 33-кадровые видео в разрешении 512x512
Пример рабочего процесса:
- В CLIPTextEncode (Positive Prompt / Negative Prompt): Введите описание сцены (например, "лиса, быстро движущаяся в красивом зимнем пейзаже с деревьями и горами днём, отслеживающая камера").
- В Load Image: Загрузите ваше базовое изображение.
- Для дальнейшей настройки (по желанию):
- В KSampler: Настройте
steps (по умолчанию: 30) для баланса качества и скорости.
- В ModelSamplingSD3: Измените значение
scale (по умолчанию: 8) для следования подсказке.
- Нажмите Queue Prompt для начала генерации.
- В SaveAnimatedWEBP найдите предварительный просмотр вашего вывода (также сохранён в ComfyUI > Output папка).
3.2 Справочник параметров для Wan 2.1
- KSampler:
steps: 20-30 (более высокие значения улучшают качество, но увеличивают время)cfg: 6.0 (контролирует силу следования подсказке)scheduler: "simple" (определяет подход к планированию шума)sampler_name: "uni_pc" (рекомендуемый семплер для Wan 2.1)
- WanImageToVideo:
width/height: 512 (разрешение вывода)length: 33 (кадров на видео)batch_size: 1 (количество видео за запуск)
- ModelSamplingSD3:
scale: 8 (контролирует следование руководству)
- EmptyHunyuanLatentVideo:
width/height: 832/480 (разрешение вывода T2V)length: 33 (кадров на видео)batch_size: 1 (количество видео за запуск)
3.3 Продвинутая оптимизация с Wan 2.1
- Оптимизация памяти:
- Используйте модель Wan 2.1 1.3B для более быстрой генерации с меньшими требованиями к VRAM.
- Уменьшите разрешение (например, 512x320) для более быстрой обработки.
- Уменьшите количество кадров для более коротких и быстрых рендеров.
- Оптимизация качества:
- Используйте модель Wan 2.1 14B для более высокого качества вывода.
- Увеличьте количество шагов KSampler до 30-40 для более детализированных результатов.
- Используйте Image-to-Video с высококачественным базовым изображением для лучшей точности.
Дополнительная информация
Для получения дополнительных сведений о Wan 2.1 посетите Wan-Video GitHub repository.
Благодарности
Модель Wan 2.1 была разработана командой Wan, а интеграция с ComfyUI была создана оригинальными разработчиками. Полная признательность этим новаторам за продвижение видеогенерации с использованием ИИ.
