Этот рабочий процесс ComfyUI Img2Vid создан Titto13 на основе исключительной работы ipiv. Этот рабочий процесс, сосредоточенный на динамической генерации изображений и их корректировке, состоит из модулей AnimateDiff LCM, IPAdapter, QRCode ControlNet и Custom Mask. Каждый из этих модулей играет решающую роль в процессе Img2Vid, улучшая качество анимации морфинга.
Основные компоненты рабочего процесса Img2Vid для анимации морфинга
1. Модуль AnimateDiff LCM:
Интегрирует модель AnimateLCM в настройку AnimateDiff для ускорения процесса рендеринга. AnimateLCM ускоряет генерацию видео, уменьшая количество необходимых шагов вывода и улучшая качество результатов за счет раздельного обучения согласованности. Это позволяет использовать модели, которые обычно не дают высококачественных результатов, делая AnimateLCM эффективным инструментом для создания детализированных анимаций.
2. Модуль IPAdapter:
Использует функцию маски внимания IPAdapter для достижения морфинга между референсными изображениями. Пользователи могут создавать специальные маски внимания для каждого изображения, обеспечивая плавные переходы в конечном видео.
3. Модуль QRCode ControlNet:
Использует черно-белое видео в качестве входных данных для модели ControlNet QRCode, направляя поток анимации и улучшая визуальную динамику последовательности морфинга.
4. Модуль Mask:
Предоставляет три предустановленные маски и позволяет пользователям загружать пользовательские маски. Все эти маски могут быть переключены простым нажатием одной кнопки для достижения различных эффектов.
Как использовать рабочий процесс Img2Vid для создания анимаций морфинга
1. Загрузка изображений и применение масок
- Загрузка изображений: Загрузите изображения в узлы "Load White" и "Load Black". Рабочий процесс включает различные маски изображений, которые пользователи могут выбрать в зависимости от своих потребностей.
- Обработка масок: Маски можно выбрать, нажав "Action!", а пользовательские маски можно загрузить и применить, увеличивая гибкость.
2. Корректировка изображений
- Поворот, обрезка и переворот изображений: Настройте изображения, используя функции "Rotate Mask" и "Flip Image" для достижения желаемых эффектов. Функция "Fast Crop" позволяет пользователям выбирать между обрезкой по центру или добавлением черных границ, чтобы изображения подходили. Функция "Detail Crop" позволяет обрезать конкретные детали с изображений. (Эта функция дает вам больше контроля над вашими творениями, поэтому включите ее, если это необходимо!)
3. Настройка параметров
- AnimateDiff - Motion Scale: Настройка этого параметра изменяет плавность анимации. Увеличение значения добавляет больше движения, но может снизить качество деталей. Рекомендуемый диапазон - 1.000-1.300, рекомендуется экспериментировать.
- QRCode ControlNet - Strength и End Percent: Эти параметры контролируют интенсивность анимации и эффект перехода. Обычно настраивайте "Strength" между 0.4 и 1.0 и "End Percent" между 0.350 и 0.800.
- Mask - Force Rate: Установите на "0" для начальной скорости или "12" для ускоренных и удвоенных циклов. Настройте это значение в зависимости от длины анимации и нужных эффектов.
- IPAdapter - Preset: Рекомендуется использовать предустановку "VIT-G" для более стабильных результатов. Для результатов, более близких к оригинальным изображениям, переключитесь на предустановку "PLUS" и установите "weight_type" на "ease in-out".
Для получения дополнительной информации и просмотра оригинальной работы, пожалуйста, посетите страницу автора на Civitai Titto13.