logo
RunComfy
  • ComfyUI
  • 训练器新
  • 模型
  • API
  • 定价
discord logo
模型
探索
所有模型
资源库
生成记录
模型 API
API 文档
API 密钥
账户
使用情况

PixVerse Lipsync:Models and API 上的脸部视频口型同步和配音 | RunComfy

pixverse/pixverse/lipsync

PixVerse Lipsync 拍摄面部视频和新的语音轨道,并返回口型同步视频以进行配音和本地化。

0:00
0:00
驱动源面部视频上的嘴唇动作的音轨 URL。
源视频 URL 具有清晰可见、光线充足的面部,可实现唇形同步。
Idle
$0.039 per second of audio, rounded up to the next whole second, with a 3-second minimum (max 600 seconds).

PixVerse Lipsync 简介

PixVerse 的 PixVerse Lipsync 重新映射现有面部视频上的嘴部动作,以匹配用于配音和对话替换的新音轨。 PixVerse Lipsync 将重新拍摄和逐帧口部编辑换成一个视频加音频通道,可帮助营销人员、本地化团队和创作者刷新台词,而无需重建镜头。对于开发人员来说,RunComfy 上的 PixVerse Lipsync 既可以在浏览器中使用,也可以通过 HTTP API 使用,因此您无需自行托管或扩展模型。
适合:电影配音|营销活动本地化 |对话替换

PixVerse / PixVerse Lipsync#


该模型是为一项简单的工作而构建的:保留现有头部说话剪辑的身份、框架和性能,同时替换语音轨道。上传一个面部清晰的视频和一个单独的音频文件,然后接收一个嘴部动作跟随新对话的剪辑。


当您已经喜欢图片并且只需要嘴唇跟上时,该工作流程适合配音、本地化和对话交换。在 RunComfy 上,您可以在模型 UI 中运行 PixVerse Lipsync 或在媒体上传后通过 HTTP API 运行。


亮点#


  • 音频主导的嘴部动作: PixVerse Lipsync 从替换曲目中驱动嘴唇形状,而不是仅从文本中发明新的语音。
  • 保持源性能: 身份、灯光和相机取景在嘴部重新定时时保持接近原始镜头。
  • 双输入工作流程: 仅提供视频 URL 和音频 URL — 无分辨率模式或额外的样式旋钮可供调整。
  • 配音就绪循环: 当您本地化广告、替换台词或交换语言而无需重新安排演员时非常有用。
  • 单次生成调用: 上传完成后,一个请求会生成同步视频输出。

参数#


参数必填类型默认范围/选项描述
音频*是 (*)字符串https://playgrounds-storage-public.runcomfy.net/tools/7454/media-files/input.mp3统一资源定位符驱动嘴唇运动的音轨 URL。
视频*是 (*)字符串https://playgrounds-storage-public.runcomfy.net/tools/7454/media-files/input.mp4统一资源定位符脸部清晰可见的源视频网址。

定价#


按上传音频时长向上取整计费。最少 3 秒,最多 600 秒。


单价价格
单价$0.039/秒

如何使用#


  1. 打开 RunComfy 上的 PixVerse Lipsync 页面,然后选择视频到视频模板。
  2. 上传或粘贴讲话者脸部清晰可见、光线充足且嘴部周围基本畅通无阻的视频 URL。
  3. 上传或粘贴应驱动新唇部动作的音频 URL。
  4. 确认两个字段均已填写 - 模型仅需要这两个输入。
  5. 开始生成并等待单个视频到视频传递完成。
  6. 预览结果,然后下载输出 URL 或将其传递到下一个编辑步骤。
  7. 如果嘴部计时看起来很柔和,请消除音频中嘈杂的静音,然后以更干净的方式重试。
  8. 对于 API 使用,请先上传媒体,然后使用相同的 audio 和 video 字段调用生成。

提示和参考提示#


  • 面部清晰度: 喜欢正面或近正面的照片,这样 PixVerse Lipsync 可以可靠地锁定嘴部。
  • 灯光: 即使脸上的光线也会在嘴唇上留下浓重的阴影。
  • 遮挡: 避免手、麦克风或头发长时间遮住嘴巴。
  • 音频质量: 干净的语音和有限的背景噪音比泥泞的曲目产生更紧密的同步。
  • 长度规划:简短的对话片段更容易回顾;请记住,计费按 3 秒向上舍入和向下舍入。
  • 匹配意图: 使用节奏适合屏幕表演的音频,以便同步的嘴巴感觉自然。
  • 稳定的相机: 适度的手持抖动是可以的,但面部周围的极端运动模糊会削弱对准。

PixVerse Lipsync 与其他模型相比如何#


根据公开信息:


  • 对比。文本驱动的头部说话工具: 此路径从真实的镜头和完成的音频文件开始,因此它取代了现有表演中的嘴唇,而不是从脚本合成完整的头像。
  • 对比。图像到说话的视频系统: 这些工具通常使静态肖像动画化; PixVerse Lipsync 需要一个移动的源视频并专注于嘴部重定时。
  • 对比。完整的生成视频编辑器:更广泛的视频模型根据提示重写场景;在这里,范围保持狭窄——将嘴唇与音频同步,同时保留镜头。
  • 何时选择: 当图片已获得批准且仅需要更改语音曲目时选择此模型。

相关型号

gemini-omni-flash/video-edit

根据文本指令编辑源视频,同时保持场景结构与动作连贯。

ltx-2.5/image-to-video/pro

LTX 2.5 Pro:带有同步音频的静态视频,质量模式

hunyuan-video-v1.5/image-to-video

根据图片和提示词生成 5 秒或 8 秒的 480p 或 720p 视频。

veo-3-1/fast/image-to-video

使用Veo 3.1 Fast轻松将图片或文字转化为高质量电影级视频,创作高效灵活。

runway-aleph-2/video-to-video

提示词驱动的视频编辑,在多镜头片段中保留原始运动

hailuo-2-3/fast/pro/image-to-video

将静态图像快速转换为逼真动态视频,支持1080p高质量创作,释放视觉创意潜能

常见问题

PixVerse Lipsync 在视频到视频工作流程中的用途是什么?

PixVerse Lipsync 重新映射现有头部说话剪辑中的嘴部运动,使其与替换音轨匹配。它通常用于配音、本地化、对话修复和简短的头像式更新,而无需重新拍摄。

PixVerse Lipsync 需要什么输入才能生成口型同步视频?

PixVerse Lipsync 需要一个具有清晰可见面孔的源视频以及新语音的音频文件或 URL。清晰、正面的镜头和干净的音频通常会产生最自然的嘴部时序。

PixVerse Lipsync 与 RunComfy 上的其他口型同步模型相比如何?

PixVerse Lipsync 专注于现有视频的音频驱动的嘴部对齐,而不是根据提示生成完整的新场景。与更广泛的头像工具相比,它是针对语音替换和本地化的有针对性的编辑。

在使用 PixVerse Lipsync 之前我应该了解哪些输入限制?

检查当前的 RunComfy 参数面板以了解确切的文件限制。根据可用的提供商信息,保持讲话者的脸部可见且光线充足,并避免严重遮挡嘴巴,以获得更好的同步质量。

开发者可以通过 RunComfy API 使用 PixVerse Lipsync 吗?

是的。在 RunComfy 模型 UI 中原型 PixVerse Lipsync,然后通过 RunComfy API 使用相同的音频和视频参数调用相同的模型以实现生产自动化。

在 RunComfy 上使用 PixVerse Lipsync 生成的费用是多少?

PixVerse Lipsync 按上传音频计费,单价 $0.039/秒,向上取整到下一整秒,最短 3 秒,最长 600 秒。

哪些质量技巧可以改善 PixVerse Lipsync 结果?

使用干燥、清晰的语音音频,将音频长度与讲话片段相匹配,并且更喜欢正面说话的头部视频。嘈杂的轨迹、极端的轮廓角度或被遮盖的嘴部都会降低唇形的准确性。

PixVerse Lipsync 适合产品、广告和电子学习团队吗?

是的。 PixVerse Lipsync 帮助团队本地化发言人、更新广告配音以及根据新脚本调整培训剪辑,同时保持原始框架和性能。

关注我们
  • 领英
  • Facebook
  • Instagram
  • Twitter
支持
  • Discord
  • 电子邮件
  • 系统状态
  • 附属
视频模型
  • Kling 4.0 Image to Video
  • Kling 4.0 Reference to Video
  • Kling 4.0 Video Editing
  • Wan 3.0
  • Wan 2.5
  • MiniMax H3 Fast
  • 查看所有模型 →
图像模型
  • Seedream 4.5
  • Seedream 5.0 Pro
  • Flux 2 Pro
  • Qwen Image Edit 2511 LoRA
  • seedream 4.0
  • Nano Banana Pro
  • 查看所有模型 →
法律
  • 服务条款
  • 隐私政策
  • Cookie 政策
RunComfy
版权 2026 RunComfy. 保留所有权利。

RunComfy 是首选的 ComfyUI 平台,提供 ComfyUI 在线 环境和服务,以及 ComfyUI 工作流 具有惊艳的视觉效果。 RunComfy还提供 AI Models, 帮助艺术家利用最新的AI工具创作出令人惊叹的艺术作品。

PixVerse Lipsync 的示例

Video thumbnail
Loading...
Video thumbnail
Loading...
Video thumbnail
Loading...
Video thumbnail
Loading...
Video thumbnail
Loading...
Video thumbnail
Loading...