GSM8K
2021 发布 · 维护方 OpenAI
小学数学应用题(8,500 题),需要多步算术并写出思维链,现在主要用于确认基础推理是否还正常。
- 题目规模
- 8,500 道题
- 分数区间
- 0–100% 正确率
SOTA:MiMo-V2.5-Pro Base · 2026-04
原榜分数原文:99.6 (8-shot)
拖动滑块完成拼图,通过后发送验证码
独立第三方 AI 评测平台 · 只用实测数据
数学推理是最早被「刷满」的一类基准:GSM8K(8,500 道小学应用题)与 MATH(12,500 道竞赛题)都在 2021 年发布,题库公开、答案唯一,前沿模型的成绩已经贴在 99% 附近,两个分数之间的差别基本等于噪声。现在真正还能分档的是当年新出的竞赛题——AIME 2025 的30 道题在发布时不在训练集里,也正因为只有 30 道,一道题的失误就是 3.3 分,单次成绩不能当结论。
本分类收录 3 个基准:活跃 0、已饱和 2、已停用 1;高污染风险 2 个,另有 2 个(67%)能追溯到明确的 SOTA 持有模型。 全站共 36 个基准、6 个分类, 回评测基准百科看全部,或从下方「其它分类」切到相邻的一类。
2021 发布 · 维护方 OpenAI
小学数学应用题(8,500 题),需要多步算术并写出思维链,现在主要用于确认基础推理是否还正常。
SOTA:MiMo-V2.5-Pro Base · 2026-04
原榜分数原文:99.6 (8-shot)
2021 发布 · 维护方 Hendrycks et al.
AMC / AIME / Putnam 级别的竞赛数学题,多步代数、几何与组合,按最终答案精确匹配判分。
SOTA:—
原榜分数原文:~99.4% on MATH-500; full Hendrycks set abandoned
选型提示:已饱和,当前数学信号看 AIME 2025 一类新题集。
2025 发布 · 维护方 MAA
2025 年 AIME 竞赛的 30 道题,答案均为整数;题目当年发布、不在训练集里,是推理档模型的标准测试。
SOTA:GPT-5.2 (high and xhigh, tied) · 2026-08
原榜分数原文:100.00%
只剩「下限」价值:它们能说明模型具备多步算术与写出推理过程的基本能力,但无法区分前沿模型。本页把两者都标成已饱和 + 高污染风险;要比较模型,请改用当年新出的竞赛题集。
AIME 每年换题,2025 年赛季结束后这批题就成了历史题集,后续模型会用 2026 年新题评测。标成已停用不等于数据无效——它是「发布当年不可污染」的证据,只是不再代表当前水平。
单次 30 题的成绩方差很大:错一题就是 3.3 分,两次运行差 6.7 分很常见。所以要么看多次运行的中位数,要么把多个年份的 AIME 题目合并看趋势;只看一次成绩就排名,等于把噪声当信号。
常见三个原因:采样次数(单次 / 多次取最好)、是否允许使用工具或代码解释器、是否给了更长的思考预算。这三项都会显著抬高分数,且各家默认值不同,所以本页保留原榜的分数原文,方便对脚注。
不一定。数学题是「给定条件、唯一答案」,代码工程要读仓库、改多文件、跑测试,还会被脚手架与重试策略影响。选型时两类基准都要看,别用数学分替代代码分。
数据来自公开渠道整理:各基准的论文、维护方榜单与第三方跑分结果,数据日期 2026-10-19。