Этот рабочий процесс ComfyUI Img2Vid создан Titto13 на основе исключительной работы ipiv. Этот рабочий процесс, сосредоточенный на динамической генерации изображений и их корректировке, состоит из модулей AnimateDiff LCM, IPAdapter, QRCode ControlNet и Custom Mask. Каждый из этих модулей играет решающую роль в процессе Img2Vid, улучшая качество анимации морфинга.
Основные компоненты рабочего процесса Img2Vid для анимации морфинга#
1. Модуль AnimateDiff LCM:
Интегрирует модель AnimateLCM в настройку AnimateDiff для ускорения процесса рендеринга. AnimateLCM ускоряет генерацию видео, уменьшая количество необходимых шагов вывода и улучшая качество результатов за счет раздельного обучения согласованности. Это позволяет использовать модели, которые обычно не дают высококачественных результатов, делая AnimateLCM эффективным инструментом для создания детализированных анимаций.
2. Модуль IPAdapter:
Использует функцию маски внимания IPAdapter для достижения морфинга между референсными изображениями. Пользователи могут создавать специальные маски внимания для каждого изображения, обеспечивая плавные переходы в конечном видео.
3. Модуль QRCode ControlNet:
Использует черно-белое видео в качестве входных данных для модели ControlNet QRCode, направляя поток анимации и улучшая визуальную динамику последовательности морфинга.
4. Модуль Mask:
Предоставляет три предустановленные маски и позволяет пользователям загружать пользовательские маски. Все эти маски могут быть переключены простым нажатием одной кнопки для достижения различных эффектов.
Как использовать рабочий процесс Img2Vid для создания анимаций морфинга#
1. Загрузка изображений и применение масок
- Загрузка изображений: Загрузите изображения в узлы "Load White" и "Load Black". Рабочий процесс включает различные маски изображений, которые пользователи могут выбрать в зависимости от своих потребностей.
- Обработка масок: Маски можно выбрать, нажав "Action!", а пользовательские маски можно загрузить и применить, увеличивая гибкость.
2. Корректировка изображений
- Поворот, обрезка и переворот изображений: Настройте изображения, используя функции "Rotate Mask" и "Flip Image" для достижения желаемых эффектов. Функция "Fast Crop" позволяет пользователям выбирать между обрезкой по центру или добавлением черных границ, чтобы изображения подходили. Функция "Detail Crop" позволяет обрезать конкретные детали с изображений. (Эта функция дает вам больше контроля над вашими творениями, поэтому включите ее, если это необходимо!)
3. Настройка параметров
- AnimateDiff - Motion Scale: Настройка этого параметра изменяет плавность анимации. Увеличение значения добавляет больше движения, но может снизить качество деталей. Рекомендуемый диапазон - 1.000-1.300, рекомендуется экспериментировать.
- QRCode ControlNet - Strength и End Percent: Эти параметры контролируют интенсивность анимации и эффект перехода. Обычно настраивайте "Strength" между 0.4 и 1.0 и "End Percent" между 0.350 и 0.800.
- Mask - Force Rate: Установите на "0" для начальной скорости или "12" для ускоренных и удвоенных циклов. Настройте это значение в зависимости от длины анимации и нужных эффектов.
- IPAdapter - Preset: Рекомендуется использовать предустановку "VIT-G" для более стабильных результатов. Для результатов, более близких к оригинальным изображениям, переключитесь на предустановку "PLUS" и установите "weight_type" на "ease in-out".
Для получения дополнительной информации и просмотра оригинальной работы, пожалуйста, посетите страницу автора на Civitai Titto13.
