Claude Opus 4.8 · DeepSearchQA · 900 prompts;单代理与多代理按协议区分 · 成绩与配置

Claude Opus 4.8 的 DeepSearchQA · 900 prompts;单代理与多代理按协议区分 记录。本次发布有 1 条成绩记录,含 1 条精确值(可含历史记录),附 1 条来源定位。

成绩与评测条件

Claude Opus 4.8 · DeepSearchQA 成绩与配置
指标与成绩配置与评测条件出处
F1 score93.1%原文 93.1% · 单位 %
公布 未确认
DeepSearchQA single-agent
设置
Web search、web fetch、programmatic tool calling;adaptive thinking 与 max effort;900 prompts,1M token budget,不使用 context compaction。
未知项
未另记
工具
允许工具
推理预算
max
框架
未记录
协议
DeepSearchQA, 900 prompts; web search/fetch and programmatic tool calling; 1M token budget without context compaction.
条件
Adaptive thinking and max effort. Table 8.10.3.B reports F1 93.1% (±1.4%), fully correct 84.8%, fully incorrect 3.9%, correct with excessive answers 4.3%.
在排名中查看此成绩

出处与披露

测试版本与指标

别名 DeepSearchQA、DeepSearchQA with multi-agents

  • F1 score · % · 越高越好
  • Accuracy · % · 越高越好