logo
RunComfy
  • ComfyUI
  • 训练器新
  • 模型
  • API
  • 定价
discord logo
模型
探索
所有模型
资源库
生成记录
模型 API
API 文档
API 密钥
账户
使用情况

Gemini Omni Flash Reference to Video:参考图驱动的同步音频视频生成 | RunComfy

google/gemini-omni-flash/reference-to-video

Gemini Omni Flash Reference to Video 可根据一张或多张参考图与提示词生成带原生同步音频的短片,并在 3–10 秒的视频中保持主体和风格一致;支持 16:9 和 9:16。

目录

1. 快速开始2. 身份验证3. API 参考提交请求查询请求状态获取请求结果取消请求4. 文件输入托管文件(URL)5. 数据结构输入结构输出结构

1. 快速开始

使用 RunComfy 的 API 运行 google/gemini-omni-flash/reference-to-video。 可接受的输入与输出请参阅模型的 数据结构说明。

curl --request POST \
  --url https://model-api.runcomfy.net/v1/models/google/gemini-omni-flash/reference-to-video \
  --header "Content-Type: application/json" \
  --header "Authorization: Bearer <token>" \
  --data '{
    "prompt": "The character from the reference walks forward through a sunlit forest clearing, dappled light moving across the scene as the camera slowly tracks alongside, leaves rustling and soft birdsong in the background.",
    "image_urls": [
      "https://playgrounds-storage-public.runcomfy.net/tools/7388/media-files/input-1-1.png"
    ]
  }'

2. 身份验证

将 YOUR_API_TOKEN 环境变量设置为您的 API 密钥(在 个人资料中管理密钥),并在每个请求的 Authorization 标头中以 Bearer 令牌形式携带: Authorization: Bearer $YOUR_API_TOKEN。

3. API 参考

提交请求

提交异步生成任务,将立即获得 request_id 以及用于查询状态、获取结果和取消的 URL。

curl --request POST \
  --url https://model-api.runcomfy.net/v1/models/google/gemini-omni-flash/reference-to-video \
  --header "Content-Type: application/json" \
  --header "Authorization: Bearer <token>" \
  --data '{
    "prompt": "The character from the reference walks forward through a sunlit forest clearing, dappled light moving across the scene as the camera slowly tracks alongside, leaves rustling and soft birdsong in the background.",
    "image_urls": [
      "https://playgrounds-storage-public.runcomfy.net/tools/7388/media-files/input-1-1.png"
    ]
  }'

查询请求状态

根据 request_id 获取当前状态("in_queue"、"in_progress"、"completed" 或 "cancelled")。

curl --request GET \
  --url https://model-api.runcomfy.net/v1/requests/{request_id}/status \
  --header "Authorization: Bearer <token>"

获取请求结果

获取指定 request_id 的最终输出与元数据;若任务未完成,响应会返回当前状态,便于继续轮询。

curl --request GET \
  --url https://model-api.runcomfy.net/v1/requests/{request_id}/result \
  --header "Authorization: Bearer <token>"

取消请求

通过 request_id 取消排队中的任务;进行中的任务无法取消。

curl --request POST \
  --url https://model-api.runcomfy.net/v1/requests/{request_id}/cancel \
  --header "Authorization: Bearer <token>"

4. 文件输入

托管文件(URL)

请提供可公网访问的 HTTPS 地址。确保目标主机允许服务端拉取(无需登录或 Cookie)、未被限流或拦截爬虫。建议:图片 ≤ 50 MB(约 4K),视频 ≤ 100 MB(约 720p 下 2–5 分钟)。私有资源请使用稳定或预签名 URL。

5. 数据结构

输入结构

{
  "type": "object",
  "title": "输入结构",
  "required": [
    "prompt",
    "image_urls"
  ],
  "properties": {
    "prompt": {
      "title": "提示词",
      "description": "描述所需的动作、场景发展、节奏和音频。可指定镜头运动与声音(如“缓慢推进”“轻风与鸟鸣”“无对白”),也可加入“不显示文字”等负向要求。请在提示词中说明上传图像分别用于主体、风格还是构图。",
      "type": "string",
      "default": "The character from the reference walks forward through a sunlit forest clearing, dappled light moving across the scene as the camera slowly tracks alongside, leaves rustling and soft birdsong in the background."
    },
    "image_urls": {
      "title": "参考图像",
      "description": "一张或多张参考图像,用于指导视频中的主体、风格、构图和整体视觉方向。支持 jpg、jpeg、png 和 webp 格式。",
      "type": "array",
      "items": {
        "type": "string",
        "format": "image_uri"
      },
      "minItems": 1,
      "default": [
        "https://playgrounds-storage-public.runcomfy.net/tools/7388/media-files/input-1-1.png"
      ]
    },
    "aspect_ratio": {
      "title": "宽高比",
      "description": "生成视频的宽高比。",
      "type": "string",
      "enum": [
        "16:9",
        "9:16"
      ],
      "default": "16:9"
    },
    "duration": {
      "title": "时长(秒)",
      "description": "生成视频的时长,以秒为单位。",
      "type": "integer",
      "minimum": 3,
      "maximum": 10,
      "default": 8
    }
  }
}

输出结构

{
  "output": {
    "type": "object",
    "properties": {
      "image": {
        "type": "string",
        "format": "uri",
        "description": "单张图片 URL"
      },
      "video": {
        "type": "string",
        "format": "uri",
        "description": "单个视频 URL"
      },
      "images": {
        "type": "array",
        "description": "多张图片 URL",
        "items": {
          "type": "string",
          "format": "uri"
        }
      },
      "videos": {
        "type": "array",
        "description": "多个视频 URL",
        "items": {
          "type": "string",
          "format": "uri"
        }
      }
    }
  }
}
关注我们
  • 领英
  • Facebook
  • Instagram
  • Twitter
支持
  • Discord
  • 电子邮件
  • 系统状态
  • 附属
视频模型
  • Wan 3.0 Prime Reference To Video
  • Wan 3.0 Prime
  • Wan 3.0 Prime Text To Video
  • Wan 2.6 Flash
  • MiniMax H3 Open Image to Video
  • MiniMax H3 Open
  • 查看所有模型 →
图像模型
  • Seedream 5.0 Pro Image Edit
  • Qwen Image 3.0 Pro Edit
  • Flux 2 Flash Edit
  • Nano Banana Pro
  • seedream 4.0
  • GPT Image 2 Image Edit
  • 查看所有模型 →
法律
  • 服务条款
  • 隐私政策
  • Cookie 政策
RunComfy
版权 2026 RunComfy. 保留所有权利。

RunComfy 是首选的 ComfyUI 平台,提供 ComfyUI 在线 环境和服务,以及 ComfyUI 工作流 具有惊艳的视觉效果。 RunComfy还提供 AI Models, 帮助艺术家利用最新的AI工具创作出令人惊叹的艺术作品。