Wan 2.1 Fun | Генерация видео с ControlNet

Wan 2.1 Fun | Генерация видео с ControlNet

Wan 2.1 Fun представляет интуитивный и мощный метод создания контента AI с использованием моделей Wan 2.1 Fun. Построенный на основе вдохновленной ControlNet структуры, Wan 2.1 Fun обеспечивает совместимость со стандартными модулями препроцессора ControlNet. Извлекая проходы Глубины, Canny или OpenPose из входных кадров, этот основанный на ControlNet рабочий процесс ComfyUI позволяет пользователям точно влиять на структуру, движение и стиль выходного видео, вместо того чтобы полагаться только на текстовые подсказки.

Wan 2.1 Fun вводит структурированные визуальные данные в процесс — сохраняя точность движения, улучшая стилизацию и позволяя более осознанные преобразования. Независимо от того, создаете ли вы динамичные анимации, выступления с управляемыми позами или экспериментируете с абстрактным искусством движения, Wan 2.1 Fun дает художественный контроль прямо в ваши руки, используя выразительную мощь моделей Wan 2.1 Fun и принципы ControlNet.

Почему использовать Wan 2.1 Fun?

Рабочий процесс Wan 2.1 Fun предлагает гибкий способ управления движением и структурой AI с использованием визуального кондиционирования в стиле ControlNet:

• Используйте Глубину, Canny или OpenPose для структурированного контроля
• Построен на системе, вдохновленной ControlNet, позволяющей управляемые преобразования
• Совместим с несколькими препроцессорами ControlNet, включая сторонние расширения
• Достигайте более четкой пространственной согласованности, формы и динамичного потока с принципами ControlNet
• Нет необходимости в сложной инженерии подсказок или обучении
• Легкий и отзывчивый с высокой визуальной точностью
• Отлично подходит для разработки действий, стилизованной хореографии или синтеза движений, управляемых производительностью

Как использовать рабочий процесс Wan 2.1 Fun ControlNet

Обзор Wan 2.1 Fun

• Загрузить модель WanFun (фиолетовый): Загрузчик модели
• Введите подсказки (зеленый): Положительные и отрицательные подсказки
• Загрузите ваше видео и измените размер (голубой): Ввод пользователя – Исходные кадры и изменение размера
• Выберите препроцессор видео (оранжевый): Узел ControlNet для Глубины, Canny или OpenPose
• Wan Fun Sampler + Сохранить видео (розовый): Сэмплирование и вывод

Быстрые шаги для начала:

1. Выберите вашу модель Wan 2.1 Fun (Wan2.1-Fun-Control (1.3B / 14B))
2. Введите ваши положительные и отрицательные подсказки
3. Загрузите исходные кадры
4. Запустите рабочий процесс через Queue Prompt
5. Получите результаты из последнего узла или папки Outputs

1 - Загрузить модель WanFun

Выберите подходящий вариант Wan2.1-Fun-Control для кондиционирования в стиле ControlNet:

• Используйте model_cpu_offload для более плавной работы с 1.3B
• Используйте sequential_cpu_offload для снижения нагрузки на GPU с 14B

2 - Введите подсказки

• Положительная подсказка:
  • Описывает стиль движения, атмосферу или визуальную текстуру
  • Яркие и описательные подсказки усиливают творческий контроль
• Отрицательная подсказка:
  • Чтобы улучшить стабильность вывода, попробуйте слова, такие как "Размытие, мутация, деформация, искажение, темный и твердый, комиксы."
  • Для более динамичного движения добавьте такие термины, как "тихий, твердый"

3 - Загрузите ваше видео и измените размер

Загрузите ваши исходные кадры. Для оптимальных результатов с Wan 2.1 Fun, измените размер, чтобы соответствовать желаемым размерам кадра.

4 - Выберите препроцессор видео

Этот раздел активирует систему предварительной обработки на основе ControlNet для Wan 2.1 Fun:

• Глубина: Захватывает пространственную компоновку в виде карты глубины
• Canny: Извлекает сильные контуры и структуру
• OpenPose: Определяет суставы, конечности и позы для работы, связанной с движением

Эти руководства настраивают рабочий процесс Wan 2.1 Fun на следование визуальным подсказкам вместо того, чтобы полагаться только на подсказки.
Все модули соответствуют стандартам предварительной обработки ControlNet, что позволяет расширять функциональность с помощью пользовательских узлов.

5 - Wan Fun Sampler + Сохранить вывод

Wan 2.1 Fun Sampler настроен для ясности и творческой согласованности.
При необходимости настройте конфигурацию. Выводы автоматически сохраняются в указанную папку.

Благодарности

Рабочий процесс Wan 2.1 Fun был разработан и , чьи вклады в контроль движений и стилизацию на основе AI сделали возможной интеграцию ControlNet. Этот проект применяет выразительную глубину моделей Wan 2.1 Fun вместе с входами Глубины, Canny и OpenPose, чтобы обеспечить композиционную и динамическую точность в визуальном производстве с поддержкой AI.
Мы благодарим их за предоставление этих инструментов творческому сообществу.