DeepSeek-R1 · GPQA Diamond · Diamond subset; task snapshot unspecified · 成绩与配置
DeepSeek-R1 的 GPQA Diamond · Diamond subset; task snapshot unspecified 记录。本次发布有 1 条成绩记录,含 1 条精确值(可含历史记录),附 1 条来源定位。
成绩与评测条件
| 指标与成绩 | 配置与评测条件 | 出处 |
|---|---|---|
| Pass@171.5%原文 71.5 · 单位 % 公布 未确认 | DeepSeek-R1 reported reasoning configuration
| 在排名中查看此成绩 |
出处与披露
- Official model card / table headed “| Category | Benchmark (Metric) | Claude-3.5-Sonnet-1022 | GPT-4o 0513 | DeepSeek V3 | OpenAI o1-mini | OpenAI o1-1217 | DeepSeek R1 |” / complete row containing “| | GPQA-Diamond (Pass@1) | 65.0 | 49.9 | 59.1 | 60.0 | **75.7** | 71.5 |” 主文 · DeepSeek-R1 official Hugging Face model card
测试版本与指标
- Pass@1 · % · 越高越好