Глиняный стиль с Unsampling

Этот рабочий процесс, созданный Inner-Reflections, исследует Unsampling как метод для постоянного переноса стиля в ComfyUI. Для подробного руководства по использованию Unsampling, обратитесь к: Consistent Style Transfer with Unsampling.

Используя этот рабочий процесс, вы можете преобразовать ваше видео в анимацию в глиняном стиле. Процесс прост, требует минимальных усилий для достижения плавного и поразительного вида claymation, напоминающего традиционные покадровые глиняные анимации.

Процесс Unsampling в ComfyUI преобразует входное видео в латентный шум, который сохраняет оригинальное движение и структуру. В отличие от случайного шума, этот репрезентативный шум служит основой для процесса диффузии, позволяя ИИ применять глиняный стиль, сохраняя временную согласованность между кадрами видео.

Ключевые компоненты рабочего процесса Clay Style Unsampling:

Inputs: Здесь вы загружаете ваше входное видео. Настройка frame_load_cap ограничивает количество загружаемых кадров из входных данных. Настройка select_every_nth пропускает кадры для уменьшения общей рабочей нагрузки. Увеличение значения select_every_nth ускоряет процесс, но может повлиять на плавность конечной анимации в глиняном стиле.

Unsample: Компонент Unsample использует euler семплирование для нахождения шума, который точно представляет входное видео. Регулируя масштаб cfg, вы можете точно настроить процесс Unsampling для более точного соответствия входным данным. Узел Flip Sigma обращает процесс диффузии, преобразуя входные кадры в латентный шум.

Prompt: Хорошо составленный запрос может значительно улучшить конечный результат, особенно когда целью является характерный глиняный стиль. Для этого стиля хороший положительный запрос может быть "(claymation:1.15), stop motion, (everything made of clay:1.1), beautiful woman dancing." Этот запрос направляет модель на воссоздание анимации, имитирующей реальные глиняные движения и текстуры.

ControlNet: Компонент ControlNet использует Depth ControlNet, предварительно обработанный DepthAnythingV2, чтобы сохранить глубину и геометрию оригинального видео. Это гарантирует, что процесс ресемплинга соответствует структуре входного видео. Настройка strength контролирует, насколько сильно ControlNet влияет на выходной результат, причем более высокие значения приводят к более точному сохранению структуры.

Resample: Компонент Resample берет несэмплированный латентный шум и повторно запускает процесс диффузии, применяя глиняный стиль для создания плавного и постоянного эффекта claymation.

Outputs: Финальные выходные кадры декодируются, сохраняются как отдельные изображения, а затем объединяются в увеличенное видео MP4, сохраняя оригинальную частоту кадров и демонстрируя новый эффект глиняного стиля.

Глиняный стиль — это лишь одна из множества захватывающих возможностей, которые можно достичь с помощью этого рабочего процесса Unsampling в ComfyUI. Экспериментируйте с различными запросами и настройками, чтобы создать свой уникальный стиль, и наслаждайтесь процессом преобразования ваших видео в динамичные и визуально впечатляющие анимации!