GLM-4.6 Smoke实测36.25分:通信维度因API故障缺失
GLM-4.6今日Smoke评测因API故障/超时导致communication维度缺失,代码执行25.00分、材料约束50.00分、工程判断25.00分,主榜36.25分未参与排名。单日10题快测波动正常,但本次数据不完整需关注是否为模型真实退化或临时故障。
GLM-4.6在今天的Smoke评测里主榜拿到36.25分。拆分来看,代码执行维度25.00分,材料约束维度50.00分,工程判断维度25.00分。communication维度的数据没拿到,所以它没有进入正式排名。
数据事实:维度得分与缺失情况
这是一次每日10题的快测,每个维度2题。GLM-4.6的代码执行25.00分、材料约束50.00分、工程判断25.00分,主榜平均36.25分。communication维度因为API故障或超时,记录完全空白,任务表达维度同样没有有效数据。与昨天相比,所有维度当时都显示“-”,今天则第一次出现了具体分数。
成因分析:题目抽签波动还是API故障主导
Smoke评测单日有起伏并不奇怪。可这次communication维度整个缺掉,指向的是API故障或超时,题目变难解释不了。代码执行和工程判断都停在25.00分,材料约束相对高一些,为50.00分,这说明模型在依赖稳定API响应的任务上断了档。题目抽签带来的波动,一般只是让分数在40-60分之间小幅挪动;25.00分这样的低位,还伴着维度缺失,更像是技术层面的连接中断,而不是模型能力突然掉了下去。
GLM-4.6本次Smoke评测communication维度因API故障/超时缺失,主榜36.25分未参与排名。
对使用者的含义
偏重代码执行的团队调用GLM-4.6做编程任务时,得留好API重试机制。25.00分已经说明,该模型在Smoke快测中出现了响应不稳。对材料忠实度敏感的场景,50.00分还算能接受;工程判断只有25.00分,则提示在多步推理的开发流程里,模型输出的一致性可能不如预期。依赖这个模型的开发者,应该在生产环境加上超时监控,别让一次API故障把整条任务链弄断。
战略判断:是否需要持续关注
对照当前得分,GLM-4.6这次异常主要来自API故障,不是模型真的退化了。单日10题快测本身的波动,解释不了维度完全缺失,因此36.25分这个结果不具代表性。下一期Smoke评测如果communication维度恢复,代码执行仍在25.00分上下,那就要把这个模型列入重点观察名单;要是回到50分以上,这次事件可以看作孤立的技术问题,选型策略不用动。
企业选型时,最好把GLM-4.6的Smoke主榜得分和完整维度记录放在一起看。只盯着36.25分,可能低估它实际能用的程度。开发者集成时应先测API稳定性,别直接拿单日快测分数当依据。