BrowseComp-ZH

BrowseComp 的中文原生版(非翻译):289 道从答案反向设计的中文多跳检索难题

基本信息

类别
中文特色
官网 / 数据集
https://arxiv.org/abs/2504.19314
论文
https://arxiv.org/abs/2504.19314

30 秒看懂

289 道从答案反向设计的中文多跳联网检索难题(11 个领域),准确率越高越好;发布时大量模型不足 10%、最好的 DeepResearch 也只有 42.9%——中文深研/联网能力的硬题对照锚点。

采用格局:证据账本中 5 次引用;国内厂商『深研/联网』叙事的中文对照锚点

评分协议

这个评测的官方统一评分协议还没收录到本页;各厂商实际使用的执行框架(harness)与推理档位(effort)已逐条写在下方引用卡里。

可比性提示:同一评测的分数是「实验配置」的产物:只要评测版本(variant)、执行框架(harness)、推理档位(reasoning effort)、工具、采样参数、运行次数或聚合方式有任何一项不同,数字就不能直接横向比较。下方各厂商的分数如未写明协议细节,请只当作方向参考。

模型发布采用时间轴

共收录 6 场模型发布(收录 7 项分值) · 按发布时间倒序排列 · 数据更新于 2026-09-20

2026
2026-02-11 Z.ai / 智谱 GLM·国内

GLM-5

参数744B-A40B MoE上下文200K模态文本

智谱以「From Vibe Coding to Agentic Engineering」为主题发布 GLM-5:744B 总参/40B 激活的 MoE(DSA 架构,28.5T 预训练 tokens),MIT 许可开源。评测覆盖推理、编码与通用智能体,亮点如 HMMT 2025.11 96.9%、τ²-Bench 89.7%。

开源权重智能体工程推理编码

查看模型变体与证据

BrowseComp-ZH 72.7
2026-01-31 StepFun / 阶跃星辰·国内

Step 3.5 Flash

参数196B-A11B MoE上下文256K模态文本

发布文将其定位为“快、准、稳”的智能体智能模型(Apache 2.0 开源,196B 总参/约 11B 激活稀疏 MoE,MTP-3,256K 上下文)。16 项评测以智能体搜索、数学与编码为主,亮点为 HMMT 2025 二月场 98.4 与 AIME 2025 97.3。

开源权重高效 MoE智能体搜索MTP-3

查看模型变体与证据

BrowseComp-ZH 66.9w/ Context Manager 73.7
2025
2025-12-22 Z.ai / 智谱 GLM·国内

GLM-4.7

模态文本

发布文以“推进编码能力”为题,将 GLM-4.7 定位为编码与智能体任务导向的模型,支持交错/保留/回合级思考模式。17 项评测覆盖数理推理、代码智能体与通用智能体,亮点为 HMMT 2025 二月场 97.1 与 τ²-Bench 87.4(SWE-bench Verified 73.8)。

编码开源权重思考模式智能体

查看模型变体与证据

BrowseComp-ZH 66.6
2025-11-06 Moonshot AI / Kimi·国内

Kimi K2 Thinking

上下文256K模态文本

月之暗面将 Kimi K2 Thinking 定位为思考型智能体(thinking agent),通过同时扩展思考 token 与工具调用步数推进测试时扩展前沿,可跨数百步规划、推理、执行与调整,全部评测结果以 INT4 QAT 精度报告。已收录评测覆盖通用推理、数学、智能体检索、编码与终端等领域,HLE 带工具 44.9(Heavy Mode 51.0)、SWE-bench Verified 71.3。

思考型智能体INT4 QAT开源权重工具调用扩展

查看模型变体与证据

w/ tools 62.3
2025-09-29 DeepSeek·国内

DeepSeek-V3.2-Exp

模态文本

DeepSeek 将 V3.2-Exp 定位为引入 DeepSeek 稀疏注意力(DSA)、聚焦长上下文训练与推理提效的实验性版本,训练设置与 V3.1-Terminus 严格对齐、公开评测表现基本持平,API 价格同步下调超 50%(页面未给出具体单价)。已收录评测覆盖通用知识、数学推理、代码与中英文检索等领域,Codeforces Div1 2121、AIME 2025 89.3。

实验性版本稀疏注意力开源权重推理提效

查看模型变体与证据

BrowseComp-ZH 47.9
2025-08-21 DeepSeek·国内

DeepSeek-V3.1

上下文128K模态文本

DeepSeek-V3.1 发布文定位为首个混合推理架构模型:同一模型同时服务 deepseek-chat(非思考)与 deepseek-reasoner(思考),主打思考效率提升与 Agent 能力增强。评测分编码代理、搜索代理与思考效率三组:SWE-bench Verified 66、BrowseComp 30、AIME 2025(V3.1-Think)88.4。

开源权重混合推理Agent 增强

查看模型变体与证据

BrowseComp-ZH 49.2

数据缺口(本页暂未收录)

以上字段暂缺时,本页不虚构数字;后续会依据每一次发布的证据逐条补齐并标注来源。

复现入口

引用

本页数据更新于 2026-09-20,依据厂商发布材料真实抓取;发现数据问题欢迎在 GitHub 提 Issue。