fantasy-portrait/image-to-video

Введение в Fantasy Portrait

В этой версии вы можете преобразовать статичное изображение в кинематографичную анимацию Fantasy Portrait, используя модель FantasyPortrait от Fantasy-AMAP в сочетании с Wan 2.1 и при необходимости лёгким LoRA. Система сохраняет индивидуальность персонажа, позволяя при этом передавать богатую эмоциями мимику, создавая видеоклипы, наполненные живыми движениями — идеально подходящие для тех, кто хочет придать жизни одному портрету.

Fantasy Portrait позволяет превращать обычные фотографии в динамичные анимации с сохранением узнаваемости лица. Этот инструмент подходит для создателей контента, художников и рассказчиков историй — он генерирует выразительные видеоклипы с естественными движениями, исходя из портретного фото и видео-референса. Результатом является высококачественное MP4-видео с точным кадрированием и профессиональной кинематографической обработкой.

Основные модели Fantasy Portrait

FantasyPortrait (Fantasy-AMAP)

Модель FantasyPortrait обеспечивает основные эмбеддинги, чувствительные к выражению лица и идентичности, гарантируя сохранение уникальных черт персонажа при добавлении тончайших нюансов движений. Это центральный элемент процесса Fantasy Portrait. Подробнее можно ознакомиться в проекте на GitHub и соответствующей статье на arXiv.

WanVideo 2.1 I2V (14B, 720p)

WanVideo 2.1 служит основой для видео-диффузии, позволяя генерировать анимацию высокого разрешения на основе портрета и управляющих подсказок (prompt). Модель формирует видео при помощи условий, заданных изображением и текстом, создавая последовательные и выразительные результаты. Квантованные и совместимые с Comfy веса доступны через пакет моделей от Kijai на Hugging Face.

Как использовать Fantasy Portrait

Необходимые входные данные

Для начала нужно загрузить изображение и видео через соответствующие поля Image и Video — они служат основой для генерации Fantasy Portrait. Укажите значения Width и Height для задания размеров конечного видео, а параметр Number of Frames определяет продолжительность анимации. Эти входные данные обеспечивают стабильное кадрирование и корректную длину ролика.

Дополнительные параметры и настройки

Вы можете направлять художественное или эмоциональное наполнение результата, добавив Prompt с краткими описательными фразами. При необходимости можно настроить параметры Seed для изменения случайности между генерациями, Shift для управления временным сдвигом движения и Steps для повышения точности выборки. Эти дополнительные настройки позволяют экспериментировать со стилем, сохраняя при этом неизменной личность персонажа.

Выходные данные

В результате создаётся высококачественное MP4-видео (по умолчанию 16 кадров в секунду, формат yuv420p), согласно описанию в Readme. Этот результат формируется на основе вашего портрета, совмещённого с эмбеддингами и подсказками, создавая выразительное и кинематографичное движение. Итог — отполированный анимационный клип Fantasy Portrait.

Рекомендации по использованию

Для получения наилучших результатов используйте чёткое, хорошо освещённое портретное фото. Загрузка видео с предсказуемыми движениями поможет достичь большей естественности. Держите Prompt коротким и сосредоточьтесь на освещении или настроении, а не на деталях личности. Умеренная корректировка параметра Steps помогает повысить чёткость изображения, а лаконичные подсказки делают выражения лица реалистичнее. Всегда проверяйте, чтобы Width, Height и Number of Frames соответствовали планируемому кадрированию и длительности видео.