DeepSeek Search API 实测:69分排17,价格全场最低
DeepSeek Search 首次登上 Artificial Analysis 搜索指数榜单,得分 69,在 27 款搜索产品中排名第 17,同时也是榜单上所有付费搜索 API 中价格最低的。
@deepseek_ai 于 10 月 17 日推出了其搜索 API。我们在 Stirrup 智能体测试框架中对其进行了基准测试,由 GPT-5.6 Luna(medium)调用 DeepSeek Search 作为其 web_search 工具,完成来自 BrowseComp、DeepSearchQA 和 AA-Omniscience 的组合任务。
DeepSeek Search 每 1000 次搜索收费 0.75 美元,单次搜索成本低于我们测试的任何其他付费搜索 API,低于定价 1 美元的 Octen、Parallel(turbo)和 Parallel(fast)。
每个任务约 0.032 美元,在 27 款产品中成本排名第 5 低,比其他 25 个搜索 API 中的 20 个更便宜(中位数为 0.066 美元),与 Nimble(lite)持平。TinyFish、Octen、Parallel(turbo)和 Parallel(fast)的成本更低。
DeepSeek Search 的关键基准测试结果:
➤ Artificial Analysis 搜索指数:DeepSeek Search 得分 69,比同一模型不使用搜索时(33 分)提升了 36 分。位于得分 71 的 TinyFish 和得分 68 的 Linkup(standard)之间。
➤ AA-Omniscience 是 DeepSeek Search 表现最强的基准:在我们的专有事实性问答基准测试中准确率达 70%。在 27 款产品中排名第 10,与并列领先者 Exa(auto, dynamic highlights)和 Firecrawl(73%)相差 3 分。
BrowseComp 需要跨多次搜索进行多跳推理,是其表现最弱的基准:以 63% 的准确率在 27 款产品中排名第 25,远落后于 Perplexity 各变体和 Octen(85% 至 87%)。
➤ 搜索结果量大:每次搜索返回约 7k tokens,接近榜单范围的上限。每条结果包含约 1.8k 字符的网页段落。这推高了模型成本:每个任务约 0.023 美元,DeepSeek 的模型成本在榜单上排名第 2 高,仅次于定价 0.039 美元的 Linkup(flash, alpha)。
➤ 128 字符查询限制:DeepSeek 会拒绝超过 128 字符的查询。智能体有 6% 的搜索触发了此限制,其中 87% 的情况下,模型第一次缩短后的改写查询即可正常工作。
关键细节:
➤ 测试设置:Stirrup 框架中的 GPT-5.6 Luna(medium),DeepSeek Search API 设置为 need_content=false(返回网页段落,不返回完整页面内容),每次搜索返回 10 条结果。
➤ 定价:每 1000 次成功搜索收费 0.75 美元。空结果不收费。
➤ 速率限制:每个账户每秒 5 次搜索。
本文由 AI 翻译自英文原帖,技术名词保留英文。
查看 X 原帖