← 全部评测图表EvalPlus / 2026-10-23
EvalPlus · CODING

HumanEval+ 代码测试

HumanEval+ 增强测试下的 pass@1。

悬停或点击柱形图查看信息;最多选中 3 个模型进行对比。
模型评分10 个模型
HumanEval+ code tests. Zoomed horizontal axis, from 80.61 to 90.09ZOOMED X-AXIS · 80.61 – 90.09 · NOT FROM ZERO80.6182.9885.3587.7290.09O1 Mini (Sept 2024)O1 Mini (Sept 2024) · 89 pass@1 (%) · zoomed horizontal axis89O1 Preview (Sept 2024)O1 Preview (Sept 2024) · 89 pass@1 (%) · zoomed horizontal axis89GPT 4o (Aug 2024)GPT 4o (Aug 2024) · 87.2 pass@1 (%) · zoomed horizontal axis87.2Qwen2.5-Coder-32B-InstructQwen2.5-Coder-32B-Instruct · 87.2 pass@1 (%) · zoomed horizontal axis87.2DeepSeek-V3 (Nov 2024)DeepSeek-V3 (Nov 2024) · 86.6 pass@1 (%) · zoomed horizontal axis86.6GPT-4-Turbo (April 2024)GPT-4-Turbo (April 2024) · 86.6 pass@1 (%) · zoomed horizontal axis86.6DeepSeek-V2.5 (Nov 2024)DeepSeek-V2.5 (Nov 2024) · 83.5 pass@1 (%) · zoomed horizontal axis83.5GPT 4o Mini (July 2024)GPT 4o Mini (July 2024) · 83.5 pass@1 (%) · zoomed horizontal axis83.5DeepSeek-Coder-V2-InstructDeepSeek-Coder-V2-Instruct · 82.3 pass@1 (%) · zoomed horizontal axis82.3Claude Sonnet 3.5 (June 2024)Claude Sonnet 3.5 (June 2024) · 81.7 pass@1 (%) · zoomed horizontal axis81.7
点击柱形条查看详情。

如何理解这张图表

EvalPlus 官方 pass@1 结果;各模型和提示配置可能不同。

指标单位:pass@1 (%). 数值仅应在相同任务和评测协议内比较。

数据获取日期:2026-10-23. 所示指标中数值越大表示结果越好。

数据来源: EvalPlus · Apache-2.0. 根据官方公开数据重新绘图;筛选部分模型并对数值作四舍五入。非数据源机构官方网站。

更多相关图表