MiniMax H3 Сцены Действий | Референсное Видео Действий

MiniMax H3 Сцены Действий: Генератор видео действий с руководством по референсам и родным звуком#

MiniMax H3 Сцены Действий - это рабочий процесс ComfyUI для создания плотно направленных видео действий с руководством по референсам и синхронизированным родным звуком. Вы предоставляете два изображения персонажей, один референс сцены и структурированную подсказку. Процесс ставит движение с MiniMax H3 Turbo, затем уточняет композицию и читаемость боя с помощью LMS и Combat LoRAs, сохраняя оригинальный звук. Выходные данные включают быструю "базовую" версию видео и видео "улучшенной" четкости.

Этот рабочий процесс ComfyUI MiniMax H3 Сцены Действий предназначен для previz, дизайна трюков и боев, кинематографических игр и VFX, а также коротких социальных клипов. Протестированные примеры включают фехтование в замке, работу с боксерскими миттами и тренировку с дубинкой на космическом корабле. Держите идентичность персонажа и хореографию явными в подсказке и проверяйте быстрые контакты рук или оружия на наличие возможных артефактов.

Ключевые модели в рабочем процессе ComfyUI MiniMax H3 Сцены Действий#

• Основной набор Comfy‑Org MiniMax H3. Обеспечивает текстовый энкодер плюс видео и аудио VAEs, используемые для создания, разделения и декодирования совместного аудио-видео латента. См. модели и LoRAs в официальной коллекции. Модели MiniMax‑H3
• Minimax‑h3 Singularity (UNet). Служит основным генератором ref‑to‑video, который объединяет референсы и подсказку в аудио-видео латент для сцен действий. Minimax‑h3_Singularity
• MiniMax‑H3 Turbo LoRA. Ускоряет первый проход, чтобы вы могли быстро проработать движения перед уточнением. Включен в официальную коллекцию MiniMax H3. MiniMax‑H3 LoRAs
• MiniMax‑H3 LMS LoRA. Добавляет компоновку, материалы и структурную резкость, подходящую для живого действия; используется во втором проходе. LMS LoRA r64
• H3 Combat LoRA. Улучшает четкость силуэтов боев, контактов лезвия и устойчивости в боевых сценариях. Включен в коллекцию MiniMax H3. Модели MiniMax‑H3
• H3 Latent Upscaler LMS. Временной 3D-апскейлер, который увеличивает латент видео между проходами, сохраняя непрерывность движения. Comfyui Minimax H3 Latent Upscaler

Как использовать рабочий процесс ComfyUI MiniMax H3 Сцены Действий#

Конвейер выполняется в двух согласованных проходах. Проход 1 устанавливает движение и тайминг с Turbo для скорости. Затем латент видео увеличивается и уточняется в проходе 2 с помощью LMS и Combat LoRAs, при этом сохраняется родной звук. Вы получаете как быстрый "базовый" предварительный просмотр, так и полированный "улучшенный" экспорт.

Настройка#

Используйте группу Настроек, чтобы выбрать соотношение сторон, рабочее разрешение, продолжительность клипа и частоту кадров. Управление продолжительностью преобразует секунды в количество кадров, которое согласуется с разбиением выборщика, что помогает стабильности. Начните с меньшего для быстрого предварительного просмотра, затем увеличьте, когда кадрирование и ритм выглядят правильно. Более высокие разрешения и более длинные клипы увеличивают потребление VRAM и время рендеринга.

Референсы#

Загрузите три референса: одно изображение на персонажа и одно изображение, определяющее окружение. Изображения персонажей выступают в качестве гидов по идентичности и костюмам, а не фонам, поэтому выбирайте чистые портреты с читаемыми лицами и ключевыми элементами гардероба. Референс сцены задает освещение, палитру и архитектуру; выберите вид, соответствующий предполагаемой высоте камеры. Вы можете свободно менять референсы, чтобы исследовать различные сочетания и локации.

Условия#

Узел MiniMaxH3ReferenceToVideo (#56) объединяет структурированную подсказку с референсами и энкодерами MiniMax H3 для создания совместного аудио-видео латента и положительной кондиционирования. Подсказка работает лучше всего, когда она разделена на помеченные секции, такие как subject_definitions, summary, retention_analysis, detailed_description, overall_soundscape и non_diegetic_music. Будьте явными в отношении количества бойцов, оружия, движения камеры и точного количества чистых контактов. Избегайте лишних персонажей, телепортаций, сверхчеловеческих движений или эффектов, если хотите получить обоснованные результаты.

LoRAs#

LoRAs применяются в два этапа. Turbo вводится для первого прохода, чтобы ускорить исследование движения, не жертвуя сохранением идентичности. LMS LoRA проходит через исправление совместимости AdaLN, затем применяется Combat, чтобы уточнитель подчеркивал читаемые силуэты и обмен ударами. Вы можете регулировать силу LoRA, чтобы сбалансировать реализм и стилизацию для вашего жанра.

Патчи#

Эта группа настраивает производительность и форму расписания. PathchSageAttentionKJ (#199) оптимизирует внимание для памяти и скорости, чтобы высокодинамичные сцены оставались отзывчивыми. MiniMaxH3SigmaShift (#297) согласовывает графики сигмы видео и аудио, улучшая синхронизацию губ и звуков относительно движения. Используйте их, когда замечаете дрейф времени или небольшую нестабильность идентичности.

1-я Выборка#

Первый проход инициализирует шум, устанавливает компактное расписание и выполняет выборку с помощью SamplerCustomAdvanced (#238), руководствуясь вашим положительным кондиционированием. Выход сохраняется как базовый латент и может быть декодирован в быстрый предварительный просмотр видео с родным звуком для быстрого просмотра. На этом этапе вы оцениваете блокировку, движение камеры и ритм ударов. Если карта ритмов неверна, пересмотрите подсказку и референсы на этом этапе перед уточнением.

2-я Выборка + Уточнитель#

Перед уточнением аудио и видео разделяются с первого прохода, латент видео увеличивается с помощью MinimaxH3LatentUpscaler3D (#124), а аудио латент остается нетронутым. Затем уточнитель выполняет выборку с низко-шумными сигмами, используя LMS и Combat LoRAs для добавления материалных деталей, четкости краев и читаемости боя. Наконец, изображения и сохраненное аудио декодируются и объединяются в уточненный экспорт. Ожидайте более четких краев, более чистых рук и лезвий, а также более устойчивой идентичности по сравнению с базовым проходом.

Ключевые узлы в рабочем процессе ComfyUI MiniMax H3 Сцены Действий#

MiniMaxH3ReferenceToVideo (#56)#

Создает синхронизированный аудио-видео латент из вашей структурированной подсказки и референсных изображений с использованием текстового энкодера MiniMax H3 и VAEs. Настройте prompt, width, height и length, чтобы управлять содержанием, кадрированием и продолжительностью. Для наилучших результатов держите определения предметов и ограничения сцены недвусмысленными. Ссылка: Comfy‑Org MiniMax‑H3.

MinimaxH3LatentUpscaler3D (#124)#

Временной согласованный 3D латентный апскейлер, который увеличивает латент видео между проходами до уточнения. Увеличьте mode.scale умеренно, чтобы получить детали без дестабилизации движения. Полезно, когда вам нравится тайминг первого прохода, но вы хотите более четкие края и текстуры. Ссылка: Comfyui Minimax H3 Latent Upscaler.

MiniMaxH3SigmaShift (#297)#

Смещает графики сигмы аудио и видео, используемые MiniMax H3, чтобы движение, движения губ и звуковые эффекты оставались синхронизированными. Настройка shift_video и shift_audio может уменьшить дрейф времени в диалогах или ударах. Оставьте небольшие смещения, если не заметите десинхронизацию при входе или выходе. Ссылка: Коллекция MiniMax‑H3.

VHS_VideoCombine (#264)#

Объединяет декодированные кадры и аудио в окончательный MP4 с выбранной вами частотой кадров и настройками качества. Включите сохранение метаданных, чтобы сохранить происхождение и детали рабочего процесса в экспортах. Используйте trim_to_audio, когда ваше уточненное видео превышает сохраненное аудио. Ссылка: ComfyUI‑VideoHelperSuite.

PathchSageAttentionKJ (#199)#

Оптимизация внимания, которая может улучшить пропускную способность и стабильность для сцен с высокой детализацией и большими разрешениями. Оставьте его включенным для длительных дублей или сложных окружений. Если вы сталкиваетесь с регрессиями производительности на более коротких клипах, попробуйте его автоматический режим. Ссылка: ComfyUI‑KJNodes.

Дополнительные возможности#

• Шаблон подсказки. Используйте предоставленный формат с секциями и напишите карту ритмов для действий. Укажите точное количество бойцов и оружия, движение камеры, а также количество и время читаемых контактов.
• Курация референсов. Выбирайте фотографии идентичности с четкими лицами и гардеробом, а также изображение локации, соответствующее предполагаемой перспективе и освещению. Избегайте загруженных фонов на референсах персонажей, чтобы уменьшить конфликты.
• Проверка прохода. Просмотрите базовое видео, чтобы подтвердить блокировку и тайминг перед уточнением. Если контакты выглядят расплывчатыми, увеличьте четкость в подсказке и уменьшите скорость рук или лезвия.
• Типичные проблемы и решения. Быстрые контакты рук или оружия могут вызвать небольшие искажения; упростите хореографию вокруг ударов, сократите обмен или увеличьте расстояние от камеры, чтобы помочь модели четко отобразить момент.
• Результаты. Рабочий процесс записывает быстрый базовый предварительный просмотр и уточненный экспорт, чтобы вы могли сравнить движение с финальным видом. Используйте уточненный клип для обмена, когда идентичности, окружение и ритмы соответствуют вашей цели.

С MiniMax H3 Сцены Действий вы можете превратить два изображения персонажей, референс сцены и точное задание в обоснованные, точные к референсам экшн-клипы с синхронизированным родным звуком, готовые для редактирования, превизуализации или публикации.

Благодарности#

Этот рабочий процесс реализует и развивает следующие работы и ресурсы. Мы с благодарностью признаем Innovate Futures @ Benji за руководство по рабочему процессу AI Video MiniMax H3 ComfyUI, WarmBloodAban за Minimax-h3_Singularity и Comfy-Org и RunningHubAI за базовые модели MiniMax-H3 и LMS LoRA за их вклад и поддержку. Для получения авторитетных деталей, пожалуйста, обратитесь к оригинальной документации и репозиториям по ссылкам ниже.

Ресурсы#

• Innovate Futures @ Benji/AI Video MiniMax H3 (источник рабочего процесса)
  • Документы / Примечания к выпуску: AI Video Minimax H3 Action Scenes Update — Новые настройки выборки в ComfyUI
• WarmBloodAban/Minimax-h3_Singularity
  • Hugging Face: WarmBloodAban/Minimax-h3_Singularity
• Comfy-Org/MiniMax-H3
  • GitHub: Comfy-Org/workflow_templates
  • Hugging Face: Comfy-Org/MiniMax-H3
• RunningHubAI/rh-minimax-h3-lms-v1.0-r64-lora
  • Hugging Face: RunningHubAI/rh-minimax-h3-lms-v1.0-r64-lora

Примечание: использование упомянутых моделей, наборов данных и кода подчиняется соответствующим лицензиям и условиям, предоставленным их авторами и поддерживающими лицами.