GLM-5.3 · NL2Repo(GLM-5.3模型卡;unknown) 58 · 主文证据(ev-glm53-nl2repo)

GLM-5.3 的 NL2Repo · GLM-5.3模型卡;unknown 官方出处。GLM-5.3 · max · 58。见《GLM-5.3 model card | zai-org》Benchmark table, NL2Repo row, GLM-5.3 column; NL2Repo footnote。证据 ev-glm53-nl2repo。

原文与定位

GLM-5.3 · NL2Repo(GLM-5.3模型卡;unknown),GLM-5.3 · max配置,Reported score 58(具体成绩公布时间未确认)。见《GLM-5.3 model card | zai-org》Benchmark table, NL2Repo row, GLM-5.3 column; NL2Repo footnote。 查看成绩条件

| NL2Repo | 58.0 | 48.9 | 58.0 | 61.1 | 55.9 | **69.7** | – | – | **NL2Repo**: We evaluated NL2Repo with `temperature=1.0`, `top_p=1.0`, and `max_new_tokens=64k` under 1M context. To prevent hacking, we use rule-based and a LLM-based judgement to prevent malicious behaviors (e.g., unauthorized pip or curl operations).
官方材料
GLM-5.3 model card | zai-org
定位
主文 · Benchmark table, NL2Repo row, GLM-5.3 column; NL2Repo footnote
材料版本
官方 Hugging Face main 分支模型卡;表格、评测脚注与配置说明已核读;2026-11-17 采集
版本公布
未确认
披露时间
未确认 · 首发/后补未确认
采集时间
历史依据
暂无可靠历史版本依据
引用文本

GLM-5.3 · NL2Repo(GLM-5.3模型卡;unknown),GLM-5.3 · max配置,Reported score 58(具体成绩公布时间未确认)。官方出处 GLM-5.3 model card | zai-org(主文,官方 Hugging Face main 分支模型卡;表格、评测脚注与配置说明已核读;2026-11-17 采集)Benchmark table, NL2Repo row, GLM-5.3 column; NL2Repo footnote,https://huggingface.co/zai-org/GLM-5.3/blob/main/README.md。Benchlog https://benchlog.lekshome.cc/evidence/glm-5.3/ev-glm53-nl2repo/

关联成绩与条件

GLM-5.3 · NL2Repo 成绩与配置
指标与成绩配置与评测条件证据关系
Reported score58原文 58.0 · 单位 未标注
公布 未确认
GLM-5.3 · max
设置
官方模型卡目标列;逐行scaffold、工具、采样及预算条件见protocol。来源把benchmark复现明确绑定max或行内明确reasoning_effort=max。
未知项
未逐项说明的指标单位、题集修订、服务精度和运行次数保持未知。
工具
工具条件未记录
推理预算
输出上限 64k tokens
框架
未记录
协议
The card says reasoning_effort defaults to max and recommends keeping that default for benchmark reproduction. **NL2Repo**: We evaluated NL2Repo with `temperature=1.0`, `top_p=1.0`, and `max_new_tokens=64k` under 1M context. To prevent hacking, we use rule-based and a LLM-based judgement to prevent malicious behaviors (e.g., unauthorized pip or curl operations).
条件
GLM-5.3; version, score definition, unit, effort, endpoint and precision unspecified. 2026-11-18按完整模型卡修正单位、指标/题集或协议标注,数字不变。

直接支持该成绩

在排名中查看此成绩