hunyuan/image-to-video
Плавные переходы сцен, реалистичное движение и точная передача динамики.
В этой версии вы можете преобразовать статичное изображение в кинематографичную анимацию Fantasy Portrait, используя модель FantasyPortrait от Fantasy-AMAP в сочетании с Wan 2.1 и при необходимости лёгким LoRA. Система сохраняет индивидуальность персонажа, позволяя при этом передавать богатую эмоциями мимику, создавая видеоклипы, наполненные живыми движениями — идеально подходящие для тех, кто хочет придать жизни одному портрету.
Fantasy Portrait позволяет превращать обычные фотографии в динамичные анимации с сохранением узнаваемости лица. Этот инструмент подходит для создателей контента, художников и рассказчиков историй — он генерирует выразительные видеоклипы с естественными движениями, исходя из портретного фото и видео-референса. Результатом является высококачественное MP4-видео с точным кадрированием и профессиональной кинематографической обработкой.
Модель FantasyPortrait обеспечивает основные эмбеддинги, чувствительные к выражению лица и идентичности, гарантируя сохранение уникальных черт персонажа при добавлении тончайших нюансов движений. Это центральный элемент процесса Fantasy Portrait. Подробнее можно ознакомиться в проекте на GitHub и соответствующей статье на arXiv.
WanVideo 2.1 служит основой для видео-диффузии, позволяя генерировать анимацию высокого разрешения на основе портрета и управляющих подсказок (prompt). Модель формирует видео при помощи условий, заданных изображением и текстом, создавая последовательные и выразительные результаты. Квантованные и совместимые с Comfy веса доступны через пакет моделей от Kijai на Hugging Face.
Для начала нужно загрузить изображение и видео через соответствующие поля Image и Video — они служат основой для генерации Fantasy Portrait. Укажите значения Width и Height для задания размеров конечного видео, а параметр Number of Frames определяет продолжительность анимации. Эти входные данные обеспечивают стабильное кадрирование и корректную длину ролика.
Вы можете направлять художественное или эмоциональное наполнение результата, добавив Prompt с краткими описательными фразами. При необходимости можно настроить параметры Seed для изменения случайности между генерациями, Shift для управления временным сдвигом движения и Steps для повышения точности выборки. Эти дополнительные настройки позволяют экспериментировать со стилем, сохраняя при этом неизменной личность персонажа.
В результате создаётся высококачественное MP4-видео (по умолчанию 16 кадров в секунду, формат yuv420p), согласно описанию в Readme. Этот результат формируется на основе вашего портрета, совмещённого с эмбеддингами и подсказками, создавая выразительное и кинематографичное движение. Итог — отполированный анимационный клип Fantasy Portrait.
Для получения наилучших результатов используйте чёткое, хорошо освещённое портретное фото. Загрузка видео с предсказуемыми движениями поможет достичь большей естественности. Держите Prompt коротким и сосредоточьтесь на освещении или настроении, а не на деталях личности. Умеренная корректировка параметра Steps помогает повысить чёткость изображения, а лаконичные подсказки делают выражения лица реалистичнее. Всегда проверяйте, чтобы Width, Height и Number of Frames соответствовали планируемому кадрированию и длительности видео.
Плавные переходы сцен, реалистичное движение и точная передача динамики.
Создавайте реалистичные 1080p-видео из текстовых описаний с помощью Wan 2.2.
Генерируйте клипы с озвучкой за секунды по тексту
Создавайте оригинальные 1080p ролики из текста с помощью Pika 2.2.
Создавайте качественные видео из текста с помощью Google Veo 3, управляя стилем и движением камеры.
Создавайте видео, добавляя людей или объекты с помощью Pikadditions.
RunComfy is the premier ComfyUI platform, offering ComfyUI online environment and services, along with ComfyUI workflows featuring stunning visuals. RunComfy also provides AI Models, enabling artists to harness the latest AI tools to create incredible art.