dreamina-3-0/text-to-video
Создавайте реалистичные видео из текста с Dreamina 3.0 — быстро и удобно.
React-1 создает синхронизированный по губам монтаж из одного обязательного URL-адреса исходного видео и одного обязательного URL-адреса аудио, длительность каждого из которых ограничена 15 секундами. Шесть точных значений эмоций определяют производительность, а model_mode выбирает, будет ли редактирование охватывать губы, лицо или голову. lipsync_mode определяет, как обрабатываются несовпадающие продолжительности аудио и видео, а temperature управляет выразительностью от 0 до 1.
React-1 принимает обязательные video_url и audio_url и создает на их основе видео с синхронизацией губ. Оба входа должны быть 15 секунд или короче. Вы можете задавать эмоциональную подачу с помощью emotion, выбирать область редактирования с помощью model_mode, решать, как обрабатывать несовпадающие длины входных данных с помощью lipsync_mode и регулировать выразительность с помощью temperature.
| Параметр | Требуется | По умолчанию/опции | Что он контролирует |
|---|---|---|---|
video_url | Да | пример URL видео | Публичный URL-адрес исходного видео; 15 секунд или меньше. |
audio_url | Да | пример URL аудио | Публичный URL управляющего аудио; 15 секунд или меньше. |
emotion | Нет | По умолчанию neutral | Точные значения: happy, angry, sad, neutral, disgusted, surprised. Поддерживаются только значения эмоций, состоящие из одного слова. |
model_mode | Нет | По умолчанию face | Точные значения: lips, face, head. Устанавливает область редактирования и область перемещения. |
lipsync_mode | Нет | По умолчанию bounce | Точные значения: cut_off, loop, bounce, silence, remap. Управляет обработкой, когда длительность аудио и видео различается. |
temperature | Нет | По умолчанию 0.5; 0–1 | Управляет выразительностью синхронизации губ. |
emotion и самый узкий подходящий model_mode.lipsync_mode сознательно, если входные длины различаются, а затем корректируйте temperature небольшими шагами.$0.185 за секунду.
Создавайте реалистичные видео из текста с Dreamina 3.0 — быстро и удобно.
Создавайте реалистичные видео из изображений с кинематографическим качеством.
Анимируйте требуемое изображение первого кадра из текстового промпта, при необходимости направляя финал изображением последнего кадра.
FLUX 3 Draft: быстрый и недорогой предварительный просмотр текста в видео в разрешении 720p.
Seedance 2.5 480p: быстрое и недорогое преобразование текста в видео из подсказок.
Оживите изображение с помощью аудиодорожки в режиме речи, пения или выступления.
На этой странице документируется React-1 как рабочий процесс синхронизации губ для видео и аудио с элементами управления эмоциями, областью редактирования, обработкой несоответствий и выразительностью. Он не включает в себя контрольные данные по Lipsync-2 или Lipsync-2-Pro, поэтому заявления об относительном качестве или сохранении идентичности не могут быть подтверждены только на основе схемы.
Да. Подключите существующий клип через обязательный video_url и дорожку через обязательный audio_url. Оба должны длиться 15 секунд или меньше. Затем выберите emotion, model_mode, lipsync_mode и temperature по мере необходимости.
Схема ограничивает входы video_url и audio_url 15 секундами каждый. Он не раскрывает выходное разрешение, соотношение сторон, частоту кадров, формат вывода, настройки ControlNet или IP-адаптера, поэтому на этой странице не устанавливаются заявления о 4K, 1080p и 16:9.
Нет. Задокументированные входы video_url и audio_url должны длиться 15 секунд или меньше. Схема не описывает режим более длинной последовательности.
После проверки настроек используйте RunComfy конечную точку API и отправьте те же задокументированные поля: video_url, audio_url, emotion, model_mode, lipsync_mode и temperature. Ознакомьтесь с текущей документацией API по вопросам аутентификации, опроса статуса, ограничений и выставления счетов.
emotion принимает только happy, angry, sad, neutral, disgusted или surprised, с neutral по умолчанию. model_mode устанавливает область редактирования, а temperature регулирует выразительность между 0 и 1. Схема не документирует конкретный метод диффузии или геометрии лица.
В качестве практического руководства используйте короткий клип, в котором видно говорящее лицо и рот, и обеспечьте чистый окончательный звук. Сильная окклюзия, очень маленькие лица или противоречивые движения могут затруднить обзор, хотя в схеме не публикуются формальные пороговые значения качества для этих условий.
Эта страница начинается с существующего video_url и вождения audio_url, а затем предоставляет элементы управления синхронизацией губ. Он не предлагает полей для преобразования текста в видео или изображения в видео для создания новой сцены с нуля.
Коммерческое использование зависит от последних условий синхронизации и RunComfy, а также от прав на исходное видео и аудио. Сама схема не предоставляет универсальную коммерческую лицензию; проверьте действующую лицензию перед платным или публичным распространением.
Это означает, что вы можете выбрать одно из шести точных значений emotion и установить диапазон движения от lips, face или от head до model_mode. lipsync_mode обрабатывает несоответствия длительности, а temperature регулирует выразительность. Никакие более широкие возможности производительности не должны подразумеваться за пределами этих документированных средств контроля.
RunComfy - ведущая ComfyUI платформа, предлагающая ComfyUI онлайн среду и услуги, а также рабочие процессы ComfyUI с потрясающей визуализацией. RunComfy также предоставляет AI Models, позволяя художникам использовать новейшие инструменты AI для создания невероятного искусства.
