豆包 Pro 拿下 Smoke 快测头名:93.01 分,14 款模型参测
2026-11-20 赢政指数 Smoke 快测覆盖 14 个模型,豆包 Pro 以 93.01 分位居当日首位。Smoke 为每日 10 题快测,适合观察短期信号,不等同 Full 周榜结论。
2026-11-20 的赢政指数 Smoke 快测共覆盖 14 个模型,当日头名由
豆包 Pro 拿下,得分 93.01。Smoke 属于每天 10 题的快测,用来盯短期信号可以,但和 Full 周榜的结论不是一回事。
这一轮 Smoke 只测了代码执行和材料约束两个主榜维度,主榜按 0.55 × 代码执行 + 0.45 × 材料约束 计算。每日样本量偏小,所以单日分数更该当成监控信号看,不宜据此对模型能力下长期判断。
当日排名
| 排名 | 模型 | 主榜 | 代码执行 | 材料约束 | 诚信 |
|---|---|---|---|---|---|
| #1 | 豆包 Pro | 93.01 | 98.5 | 86.3 | pass |
| #2 | Claude Opus 4.7 | 92.16 | 94.5 | 89.3 | pass |
| #3 | GPT-6 Astra | 88.93 | 96.8 | 79.3 | pass |
| #4 | Gemini 2.5 Pro | 80.09 | 75 | 86.3 | pass |
| #5 | GPT-6 Sol | 77.29 | 71.8 | 84 | pass |
| #6 | Grok 4 | 74.49 | 66.7 | 84 | pass |
| #7 | GPT-6.1 Sol | 72.79 | 71.8 | 74 | pass |
| #8 | GPT-5.5 | 72.39 | 71.8 | 73.1 | pass |
| #9 | Claude Sonnet 4.6 | 71.89 | 70.9 | 73.1 | pass |
| #10 | GLM-4.6 | 64.69 | 47 | 86.3 | pass |
| #11 | DeepSeek V4 Pro | 59.15 | 47 | 74 | pass |
| #12 | GPT-o3 | 57.92 | 45.5 | 73.1 | pass |
| #13 | GPT-6 Luna | 55.94 | 44.6 | 69.8 | pass |
| #14 | Gemini 3.1 Pro | 55.06 | 29.5 | 86.3 | pass |
数据解读
今天的具体排布是这样:豆包 Pro 代码执行 98.5、材料约束 86.3,主榜 93.01;Claude Opus 4.7 靠材料约束 89.3 的均衡发挥拿到主榜 92.16;GPT-6 Astra 代码执行 96.8,材料约束只有 79.3,主榜 88.93。再往下,Gemini 2.5 Pro 材料约束 86.3、代码执行 75,主榜 80.09;GPT-6 Sol 代码执行 71.8、材料约束 84,主榜 77.29。头部模型在代码执行和材料约束的强弱搭配上,各有各的偏重。
分数变动方面,Gemini 2.5 Pro 主榜 +42.3 分、代码执行 +75 分;GPT-6 Astra 主榜 +24.1 分、代码执行 +47.5 分;Grok 4 主榜 +24.1 分、代码执行 +43.2 分;豆包 Pro 主榜 +21.2 分、代码执行 +49.7 分、材料约束 -13.7 分。GPT-o3 则是主榜 -20.2 分、代码执行 -28.3 分、材料约束 -10.2 分。这些起伏可能来自题目抽样的波动,还得等后续 run 复核才能确认。
异常信号也出现了几个:Claude Sonnet 4.6 材料约束暴跌 -15.2 分,GPT-o3 主榜暴跌 -20.2 分,GPT-6 Luna 材料约束暴跌 -25.2 分,Gemini 3.1 Pro 主榜暴跌 -13.7 分。Qwen3 Max 因为数据不完整,没有进入排名。Smoke 只是小样本的单日信号,上面这些观察要谨慎看待。
主要变化
- Gemini 2.5 Pro:主榜上升 42.3 分,代码执行 +75 分
- GPT-6 Astra:主榜上升 24.1 分,代码执行 +47.5 分
- Grok 4:主榜上升 24.1 分,代码执行 +43.2 分
- 豆包 Pro:主榜上升 21.2 分,代码执行 +49.7 分,材料约束 -13.7 分
- GPT-o3:主榜下降 20.2 分,代码执行 -28.3 分,材料约束 -10.2 分
需要关注的信号
- Claude Sonnet 4.6:材料约束暴跌 -15.2 分
- GPT-o3:主榜暴跌 -20.2 分
- GPT-6 Luna:材料约束暴跌 -25.2 分
- Gemini 3.1 Pro:主榜暴跌 -13.7 分
- Qwen3 Max:数据不完整(缺 execution,grounding,judgment,integrity,communication 维度,API 故障/超时),已进入自动补跑,本期不参与排名
看这类 Smoke 简报,重点其实就两个问题:某个模型是不是连续多日都暴露同一类弱点;诚信评级有没有从 pass 掉进 warn 或 fail。单日执行或约束分数的大幅变化,可能来自题目抽样,也可能是真实退化的早期信号,得靠后续 run 复核。