DeepSeek-V3 · SWE-bench Verified · Agent mode; task snapshot unspecified · 成绩与配置
DeepSeek-V3 的 SWE-bench Verified · Agent mode; task snapshot unspecified 记录。本次发布有 1 条成绩记录,含 1 条精确值(可含历史记录),附 1 条来源定位。
成绩与评测条件
| 指标与成绩 | 配置与评测条件 | 出处 |
|---|---|---|
| Resolved42%原文 42 · 单位 % 公布 未确认 | DeepSeek-V3 Chat
| 在排名中查看此成绩 |
出处与披露
- Official model card / table headed “| | **Benchmark (Metric)** | **DeepSeek V2-0506** | **DeepSeek V2.5-0905** | **Qwen2.5 72B-Inst.** | **Llama3.1 405B-Inst.** | **Claude-3.5-Sonnet-1022** | **GPT-4o 0513** | **DeepSeek V3** |” / complete row containing “| | SWE Verified (Resolved) | - | 22.6 | 23.8 | 24.5 | **50.8** | 38.8 | 42.0 |” 主文 · DeepSeek-V3 official Hugging Face model card
测试版本与指标
- Resolved · % · 越高越好