Claude Sonnet 5 · Terminal-Bench · 2.1 · 成绩与配置

Claude Sonnet 5 的 Terminal-Bench · 2.1 记录。本次发布有 1 条成绩记录,含 1 条精确值(可含历史记录),附 2 条来源定位。

成绩与评测条件

Claude Sonnet 5 · Terminal-Bench 成绩与配置
指标与成绩配置与评测条件出处
Mean reward80.4%原文 80.4% · 单位 %
公布 未确认
Xhigh effort
设置
Xhigh effort in Terminal-Bench 2.1.
未知项
No other model sampling details are stated for that evaluation.
工具
工具条件未记录
推理预算
xhigh
框架
mini-SWE-agent harness
协议
Terminal-Bench 2.1; mini-SWE-agent harness; 89 tasks × 5 attempts = 445 trials.
条件
Xhigh effort; GKE with 1x timeout rate and 3x memory ceiling before pod preemption.
在排名中查看此成绩

出处与披露

测试版本与指标

别名 Terminal-Bench 2.1

  • Mean reward · % · 越高越好
  • Score · % · 越高越好