← 返回AI工具

TwelveLabs 视频理解 API

用 Marengo 把视频切成可检索的向量,用 Pegasus 直接根据画面、语音和声音生成文字结论

工具界面

交互式工具即将上线

功能特点

  • ✓ 免费档提供 600 分钟(10 小时)视频索引额度,无需绑定信用卡
  • ✓ Marengo 负责多模态向量检索,Pegasus 负责视频转文字与分析
  • ✓ Developer 档按量计费:视频索引 2.50 美元/小时,单次检索 1000 次 4 美元
  • ✓ Analyze API 按输入视频 1.75 美元/小时计价,输出按 token 计费
  • ✓ 单条索引最长 10 小时、可容纳 100 个视频、5 个并发索引任务

使用步骤

  1. 注册 TwelveLabs 账号,免费档直接拿到 600 分钟索引额度
  2. 上传视频建立索引,等待 Marengo 生成多模态向量
  3. 用 Search API 或 Jockey 做自然语言检索,定位具体时间片段
  4. 用 Pegasus 对选定片段生成摘要、标签或结构化字段

常见问题

免费额度用完之后怎么办?

免费档为 600 分钟累计索引额度,官方说明这部分额度是累积的,即使删除索引或视频也不会返还。用完后需升级到 Developer 档(按量付费,需绑定信用卡),或与销售谈 Enterprise 承诺用量合同。

Developer 档具体怎么算钱?

按官方定价页:视频索引 2.50 美元/小时,Embedding 基础设施 0.09 美元/小时(按月),Search API 4 美元/1000 次查询;Embed API 按 token 计费,视频 0.26 美元/百万 token、音频 0.065、图片 0.08、文本 0.2、文档 0.162;Analyze API 输入视频 1.75 美元/小时。

免费档的索引有保存期限吗?

有。免费档索引自创建起保留 90 天,单索引最长 10 小时、最多 100 个视频、并发索引任务 5 个。升级到 Developer 后未过期的索引会自动转为无期限访问。

Marengo 和 Pegasus 该怎么分工?

Marengo 是向量模型,适合「找出这段画面在第几分钟」这类检索和分类任务;Pegasus 是视频语言模型,适合「看完这段视频写出结论」这类生成任务。实际工程里通常先用 Marengo 定位片段,再把片段喂给 Pegasus 出文字。

支持多长的视频?

官方定价页写明 Developer 档单索引最长 10,000 小时、可容纳 100,000 个视频、25 个并发索引任务,而免费档单索引上限 10 小时;官网首页也强调单条视频 4 小时可以在一次 API 调用里处理。