Оболочка ComfyUI FramePack интегрирует передовую технологию FramePack Стэнфордского университета в среду ComfyUI. FramePack основан на инновационных методах упаковки контекста кадров, которые позволяют эффективно и качественно создавать длинные видео с минимальными вычислительными ресурсами. Технология FramePack позволяет генерировать тысячи кадров с полной частотой 30 кадров в секунду даже на скромных конфигурациях GPU, таких как 6GB ноутбуки, делая профессиональное создание видео доступным для всех. Уникальный подход FramePack к генерации видео напоминает диффузию изображений, но обеспечивает исключительные результаты видео.
Пример настройки для FramePack:
Load Image: Загрузите эталонное изображение, которое будет анимировано в видео с помощью FramePackFramePackSampler: Установите длину видео (например, 5.0 секунд)Video Combine: Установите частоту кадров (например, 30) и выходной формат (например, video/h264-mp4)run, чтобы запустить рабочий процесс FramePackVideo CombineУзел FramePackSampler:
steps: Количество шагов диффузии (например, 30) - более высокие значения обеспечивают лучшее качество, но требуют больше времени в FramePackguidance_scale: Дополнительная сила направляющего сигнала в FramePack (например, 10.00) - более высокие значения более строго следуют подсказкамseed: Случайное семя для воспроизводимых результатов в FramePack (например, 47)total_second_length: Длительность сгенерированного видео в секундах (например, 5.0) в FramePackcontrol_after_generate: Управляет методом выборки предотвращения дрейфа в FramePack (оставьте "fixed" для лучших результатов)Узел Video Combine:
frame_rate: Кадров в секунду в выходном видео FramePack (например, 30)crf: Фактор качества сжатия (например, 19) - более низкие значения = более высокое качество видео FramePackГенерация более длинных видео с FramePack: Одно из ключевых преимуществ FramePack - это возможность эффективно генерировать длинные видео. Для создания более длинных видео:
total_second_length в узле FramePackSampler (например, с 5.0 до 10.0, 30.0 или даже 60.0+)control_after_generate в положении "fixed", чтобы использовать продвинутую технологию выборки предотвращения дрейфа FramePackgpu_memory_preservation для управления использованием памятиlatent_window_sizeНастройка разрешения видео: Чтобы изменить разрешение выходного видео FramePack, настройте узел "Resize Image" в рабочем процессе:
width и height, чтобы установить желаемые размеры видео FramePackgpu_memory_preservation для балансировки использования памяти в FramePackСоветы по подсказкам FramePack:
Технология FramePack использует инновационные методы двунаправленной выборки, которые разрушают традиционные ограничения причинности для предотвращения ухудшения качества в более длинных видео. Особенно для генерации изображений в видео, FramePack применяет "инвертированную выборку предотвращения дрейфа", которая рассматривает первый кадр как целевой ориентир на протяжении всего процесса генерации, обеспечивая высокое качество даже в видео до 60 секунд и более (1800+ кадров).
Для получения дополнительных сведений и загрузки моделей FramePack:
Этот рабочий процесс поддерживается FramePack, разработанным Lvmin Zhang и Maneesh Agrawala в Стэнфордском университете. Оболочка ComfyUI FramePack предоставлена kijai, включая адаптированные рабочие процессы и интеграции, которые позволяют эффективно генерировать длинные видео с технологией FramePack. Полный кредит принадлежит оригинальным авторам за их новаторскую работу над FramePack.
RunComfy - ведущая ComfyUI платформа, предлагающая ComfyUI онлайн среду и услуги, а также рабочие процессы ComfyUI с потрясающей визуализацией. RunComfy также предоставляет AI Playground, позволяя художникам использовать новейшие инструменты AI для создания невероятного искусства.
