DeepSeek-V3 · GPQA Diamond · Diamond subset; task snapshot unspecified · 成绩与配置
DeepSeek-V3 的 GPQA Diamond · Diamond subset; task snapshot unspecified 记录。本次发布有 1 条成绩记录,含 1 条精确值(可含历史记录),附 1 条来源定位。
成绩与评测条件
| 指标与成绩 | 配置与评测条件 | 出处 |
|---|---|---|
| Pass@159.1%原文 59.1 · 单位 % 公布 未确认 | DeepSeek-V3 Chat
| 在排名中查看此成绩 |
出处与披露
- Official model card / table headed “| | **Benchmark (Metric)** | **DeepSeek V2-0506** | **DeepSeek V2.5-0905** | **Qwen2.5 72B-Inst.** | **Llama3.1 405B-Inst.** | **Claude-3.5-Sonnet-1022** | **GPT-4o 0513** | **DeepSeek V3** |” / complete row containing “| | GPQA-Diamond (Pass@1) | 35.3 | 41.3 | 49.0 | 51.1 | **65.0** | 49.9 | 59.1 |” 主文 · DeepSeek-V3 official Hugging Face model card
测试版本与指标
- Pass@1 · % · 越高越好