Claude Opus 4.6 · Humanity's Last Exam(2,500-question benchmark) · 主文证据(ev-op46-hle)

Claude Opus 4.6 的 Humanity's Last Exam · 2,500-question benchmark 官方出处。见《Introducing Claude Opus 4.6》Humanity's Last Exam 行。证据 ev-op46-hle。

原文与定位

Claude Opus 4.6 · Humanity's Last Exam(2,500-question benchmark),HLE 无工具配置,Accuracy 40%(具体成绩公布时间未确认)。见《Introducing Claude Opus 4.6》Humanity's Last Exam 行。 查看成绩条件

Claude Opus 4.6 · Humanity's Last Exam(2,500-question benchmark),HLE 有工具配置,Accuracy 53%(成绩公布 2026-02-23)。见《Introducing Claude Opus 4.6》Humanity's Last Exam 行。 查看成绩条件

Opus 4.6: 40.0% without tools; 53.0% with tools.
官方材料
Introducing Claude Opus 4.6 · 定位到章节
定位
主文 · Humanity's Last Exam 行
材料版本
官方发布页;原文发布日期 2026-02-05。保留的发布材料:本地留存副本、本地留存副本、本地留存副本。当前 HTML/TXT:本地留存副本 与 current-opus-4-6-main.txt;HTML last-modified 2026-10-14 23:55:44 UTC。2026-11-16 已全文核读并检查全部 14 个 figure、21 个非 figure 图像;截图清单见 本地留存副本。当前页显示 2026-02-23 HLE with-tools 更正,不代表首发内容未曾变化。
版本公布
未确认
披露时间
未确认 · 首发/后补未确认
采集时间
历史依据
暂无可靠历史版本依据
引用文本

Claude Opus 4.6 · Humanity's Last Exam(2,500-question benchmark),HLE 无工具配置,Accuracy 40%(具体成绩公布时间未确认);Claude Opus 4.6 · Humanity's Last Exam(2,500-question benchmark),HLE 有工具配置,Accuracy 53%(成绩公布 2026-02-23)。官方出处 Introducing Claude Opus 4.6(主文,官方发布页;原文发布日期 2026-02-05。保留的发布材料:本地留存副本、本地留存副本、本地留存副本。当前 HTML/TXT:本地留存副本 与 current-opus-4-6-main.txt;HTML last-modified 2026-10-14 23:55:44 UTC。2026-11-16 已全文核读并检查全部 14 个 figure、21 个非 figure 图像;截图清单见 本地留存副本。当前页显示 2026-02-23 HLE with-tools 更正,不代表首发内容未曾变化。)Humanity's Last Exam 行,https://www.anthropic.com/news/claude-opus-4-6#evaluating-claude-opus-46。Benchlog https://benchlog.lekshome.cc/evidence/claude-opus-4-6/ev-op46-hle/

关联成绩与条件

Claude Opus 4.6 · Humanity's Last Exam 成绩与配置
指标与成绩配置与评测条件证据关系
Accuracy40%原文 40.0% · 单位 %
公布 未确认
HLE 无工具
设置
Humanity’s Last Exam;无工具;卡片图注明确 adaptive thinking,但未明确 effort。
未知项
effort 未说明。
工具
禁止工具
推理预算
未记录
框架
未记录
协议
Humanity's Last Exam;without tools。
条件
2,500-question Humanity’s Last Exam;reasoning only, no tools;adaptive thinking enabled;图注未明确 effort,保持 reported。

直接支持该成绩

在排名中查看此成绩
Accuracy53%原文 53.0% · 单位 %
公布

raw/opus-4-6-announcement.txt line 138;官方修订说明。

HLE 有工具
设置
Max effort、adaptive thinking;web search/fetch、programmatic tool calling、code execution;50K context compaction,最多 3M total tokens。
未知项
每个配置的试验数未在系统卡段落中给出。
工具
允许工具
推理预算
max
框架
未记录
协议
Humanity's Last Exam;with tools。
条件
2,500-question HLE;web search/fetch、PTC、code execution、50K context compaction up to 3M tokens;adaptive thinking、max effort;Sonnet 4.5 grader;污染候选经 transcript review 与人工复核。System card changelog dates the score correction Feb. 17; announcement correction evidence dates it Feb. 23.

直接支持该成绩

在排名中查看此成绩