Узлы ComfyUI-MMAudio и связанный с ними рабочий процесс полностью разработаны Kijai. Мы отдаем должное Kijai за эту инновационную работу. На платформе RunComfy мы просто представляем вклад Kijai в сообщество. Важно отметить, что в настоящее время нет формальной связи или партнерства между RunComfy и Kijai. Мы глубоко ценим работу Kijai!
MMAudio — мощный инструмент для создания синхронизированного аудио из видео и текстовых вводов. Он использует мультимодальное совместное обучение, чтобы учиться на разнообразных аудио-визуальных и аудио-текстовых наборах данных, обеспечивая исключительную адаптивность. С его передовым модулем синхронизации, он идеально выравнивает аудио с кадрами видео. MMAudio революционизирует генерацию аудио, упрощая процесс для создателей и новаторов.
Это рабочий процесс MMAudio, узлы на левой стороне — это входы для загрузки видео, в середине — узлы обработки MMAudio, а справа — узлы выхода.
Видео настроено на уменьшение разрешения до ?*512, так как обработка HD видео или более длинного видео может привести к нехватке памяти.
Положительное
: Введите команды для генерации аудио из видео.Отрицательное
: Введите, что вы не хотите слышать.Шаги
: Больше шагов может улучшить качество аудио.Это узлы загрузчика моделей, они автоматически загрузят модели в ваш comfyui за 2-3 минуты.
С его инновационным мультимодальным обучением и точной синхронизацией, MMAudio устанавливает новый стандарт в генерации аудио. Независимо от того, создаете ли вы видео, анимации или погружающие впечатления, MMAudio наделяет создателей безупречным, высококачественным аудио. Поднимите ваши проекты и воплотите ваши идеи в жизнь с помощью MMAudio.
RunComfy - ведущая ComfyUI платформа, предлагающая ComfyUI онлайн среду и услуги, а также рабочие процессы ComfyUI с потрясающей визуализацией. RunComfy также предоставляет AI Playground, позволяя художникам использовать новейшие инструменты AI для создания невероятного искусства.