GPT-5.1 · SWE-bench Verified(Verified subset (500 problems)) 76.3% · 主文证据(ev-gpt51-swe)

GPT-5.1 的 SWE-bench Verified · Verified subset (500 problems) 官方出处。GPT-5.1 (high) · 76.3%。见《推出为开发者打造的 GPT-5.1 | OpenAI》Appendix: Model evaluations / SWE-bench Verified row (all 500 problems)。证据 ev-gpt51-swe。

原文与定位

GPT-5.1 · SWE-bench Verified(Verified subset (500 problems)),GPT-5.1 (high)配置,Pass rate 76.3%(成绩公布 2025-11-13)。见《推出为开发者打造的 GPT-5.1 | OpenAI》Appendix: Model evaluations / SWE-bench Verified row (all 500 problems)。 查看成绩条件

SWE-bench Verified (all 500 problems): GPT-5.1 (high) 76.3%.
官方材料
推出为开发者打造的 GPT-5.1 | OpenAI
定位
主文 · Appendix: Model evaluations / SWE-bench Verified row (all 500 problems)
材料版本
Official GPT-5.1 developer release article; first same-day CDX capture 2025-11-13 22:01:55 UTC, status 200 text/html; appendix table read.
版本公布
披露时间
· 后补披露
采集时间
历史依据
Wayback CDX capture 20251113220155, status 200 text/html; replay via https://web.archive.org/web/20251113220155id_/https://openai.com/index/gpt-5-1-for-developers/ returned HTTP 200. The archived article is dated November 13, 2025.
引用文本

GPT-5.1 · SWE-bench Verified(Verified subset (500 problems)),GPT-5.1 (high)配置,Pass rate 76.3%(成绩公布 2025-11-13)。官方出处 推出为开发者打造的 GPT-5.1 | OpenAI(主文,Official GPT-5.1 developer release article; first same-day CDX capture 2025-11-13 22:01:55 UTC, status 200 text/html; appendix table read.)Appendix: Model evaluations / SWE-bench Verified row (all 500 problems),https://openai.com/zh-Hans-CN/index/gpt-5-1-for-developers/。Benchlog https://benchlog.lekshome.cc/evidence/gpt-5-1/ev-gpt51-swe/

关联成绩与条件

GPT-5.1 · SWE-bench Verified 成绩与配置
指标与成绩配置与评测条件证据关系
Pass rate76.3%原文 76.3% · 单位 %
公布
GPT-5.1 (high)
设置
Developer release table labels high reasoning effort; page separately describes adaptive reasoning in ChatGPT Instant/Thinking.
未知项
未另记
工具
工具条件未记录
推理预算
high
框架
未记录
协议
SWE-bench Verified, all 500 problems; JSON apply_patch harness.
条件
High reasoning effort.

直接支持该成绩

在排名中查看此成绩