Claude Opus 4.8 · Global MMLU · 42 languages including English · overall average · 成绩与配置

Claude Opus 4.8 的 Global MMLU · 42 languages including English · overall average 记录。本次发布有 3 条成绩记录,含 3 条精确值(可含历史记录),附 3 条来源定位。

成绩与评测条件

Claude Opus 4.8 · Global MMLU 成绩与配置
指标与成绩配置与评测条件出处
Average accuracy90.4%原文 90.4% · 单位 %
公布 未确认
多语言总体评测
设置
Structured JSON output;adaptive thinking。GMMLU 覆盖 42 种语言;MILU 覆盖 10 种 Indic languages 与英语;INCLUDE 覆盖 44 种语言。候选只记录总体聚合值。
未知项
未另记
工具
工具条件未记录
推理预算
未记录
框架
未记录
协议
GMMLU average accuracy across all evaluated languages; overall average includes English.
条件
42 languages; structured JSON responses; invalid outputs excluded from accuracy calculation.
在排名中查看此成绩
Average or worst gap to English-2.6%原文 -2.6% · 单位 %
公布 未确认
多语言总体评测
设置
Structured JSON output;adaptive thinking。GMMLU 覆盖 42 种语言;MILU 覆盖 10 种 Indic languages 与英语;INCLUDE 覆盖 44 种语言。候选只记录总体聚合值。
未知项
未另记
工具
工具条件未记录
推理预算
未记录
框架
未记录
协议
GMMLU average gap to English, aggregated over non-English languages; not a language-level slice.
条件
Direction is not an ordinary accuracy score; preserve the signed gap and aggregation label.
在排名中查看此成绩
Average or worst gap to English-10%原文 -10.0% · 单位 %
公布 未确认
多语言总体评测
设置
Structured JSON output;adaptive thinking。GMMLU 覆盖 42 种语言;MILU 覆盖 10 种 Indic languages 与英语;INCLUDE 覆盖 44 种语言。候选只记录总体聚合值。
未知项
未另记
工具
工具条件未记录
推理预算
未记录
框架
未记录
协议
GMMLU worst gap to English across languages; aggregate statistic, not an individual language result.
条件
Direction is not an ordinary accuracy score; preserve the signed gap and aggregation label.
在排名中查看此成绩

出处与披露

测试版本与指标

别名 GMMLU、Global MMLU

  • Average accuracy · % · 越高越好
  • Average or worst gap to English · % · 排序方向未确认