Grok 4代码执行单日跌15.8分,主榜只降1.1分

资讯 AI 行业观察 全文 975 字 · 约 3 分钟读完 配图 1 张 分类GrokxAI

Grok 4在今日Smoke评测中代码执行从94.00分跌至78.20分,降15.8分;材料约束从71.40分升至88.30分,涨16.9分;主榜从83.83分微降至82.75分。工程判断与任务表达侧榜同步大跌,诚信评级维持pass。

所属频道 大厂动态

Grok 4在今日Smoke评测里,代码执行一项从94.00分掉到78.20分,少了15.8分;材料约束则从71.40分升到88.30分,多了16.9分。主榜得分从83.83分降到82.75分,只回落1.1分。

数据事实:主榜与侧榜走势分道扬镳

这轮Smoke评测只有10题,代码执行和材料约束属于可审计的主榜维度。代码执行一天丢掉15.8分,材料约束同期补回16.9分,两相抵消,主榜净损失仅1.1分。侧榜两个维度跌得更凶:工程判断从75.00分落到22.20分,任务表达从100.00分降到70.40分,降幅都超过29分。诚信评级仍是pass,没有触发门槛。

成因分析:题目抽签波动还是模型真实退化

Smoke评测每天每个维度只出2题,样本量很小,单日分数的标准差自然偏高。代码执行与材料约束几乎呈镜像式的反向变动,说明这轮波动最可能来自题目抽签的随机性,而不是模型能力结构出现了系统性退化。真要发生退化,通常会有多个主榜维度同向下跌,而不是一升一降的互补格局。

工程判断和任务表达这两个侧榜维度同时大幅下滑,同样指向题目难度或类型分布发生了集中偏移。侧榜题目也许更偏向长链推理或格式要求严格的任务,而当天抽中的代码执行题目,恰好把模型在特定约束下执行不稳的一面暴露了出来。

对使用者的含义

重度依赖代码执行的开发者团队要留意,单日78.20分已经低于前一天的94.00分。在需要高一致性代码生成的场景里,应增加人工复核环节。对材料约束敏感的RAG或文档处理场景则收到正面信号,88.30分说明当日模型对输入材料的忠实度有所提升。

工程判断与任务表达侧榜的剧烈波动,对需要稳定输出格式或工程决策的自动化流程构成潜在风险。依赖Grok 4做多轮迭代的开发者,应在关键路径上保留人工校验节点,避免侧榜波动直接传导到最终交付物。

战略判断:是否需要持续关注

主榜这次只降1.1分,核心能力没有出现系统性崩塌。代码执行与材料约束的反向变动,更符合小样本抽签波动的特征,而不是模型权重或对齐策略发生了实质改变。下一期Smoke评测建议重点看代码执行能否回升到90分区间,若连续两期都停在80分以下,再考虑启动更大样本的专项验证。

目前的数据不支持把Grok 4整体能力下调的结论。选型企业仍可将其作为候选模型,但代码执行密集的场景要设置冗余验证机制。稳定性维度本期没有提供数据,无法据此判断长期一致性。


本文由本站编辑组整理与排版,内容基于公开信息核实后归纳发布,与文中提及的产品、公司无隶属关系。我们持续跟踪 AI 领域的模型、产品与行业动态,力求信息准确、表述清晰;文中涉及的名称、价格与功能细节可能随官方调整而变化,请以官方最新说明为准。如发现疏漏或表述有误,欢迎通过站内渠道反馈指正。

相关推荐 按相关度与热度排序

全部资讯 →
  1. Grok 4代码执行骤降15.8分,主榜为何只降1.1分?

    Grok 4在今日Smoke评测中代码执行从94.00分跌至78.20分,降15.8分;材料约束从71.40分升至88.30分,涨16.9分;主榜从83.83分微降至82.75分。工程判断与任务表达侧榜同步大跌,诚信评级维持pass。

    来源 AI 科技快讯
  2. Qwen3 Max三轮锚点崩溃率30.8%,Grok 4零崩溃

    v2锚点题显示,R1确认率93%、R2抵抗率69%、R3诚信率仅50.9%,Qwen3 Max R3崩溃率30.8%,Grok 4为0%。多约束场景下模型“先答应后崩盘”现象突出,生产接入需重点关注安全合规与数据边界护栏。

    来源 AI 行业观察
  3. Neuralink脑机接口迎来最强升级:Grok接入大脑,患者用意念直接唤醒AI

    近日,马斯克的脑机接口公司 Neuralink 迎来了一项令人震撼的重大技术进展 —— 将人工智能模型 Grok 直接接进了人类大脑。这意味着,脑机接口正在从单纯的“意念移动光标”迈向全新的“意念操控 AI”时代。 72小时极限爆肝:工程师住进患者家开发8大功能 这一切的背后,源于 Neuralink 团队近期展开的一

    来源 AI 开发者社区
  4. xAI为Grok文本加隐形水印:11月7日生效,覆盖全球API

    IT之家 11 月 1 日消息,SpaceXAI 将于 11 月 7 日起为 Grok 模型生成的文本添加隐形水印。检测器通过识别该信号,判断一段文本是否带有肉眼不可见水印。官方表示,本次调整是为了响应欧盟《人工智能法案》要求,全球所有地区的 SpaceXAI API 均已启用水印,包含 grok-4.7、grok-4

    来源 腾讯网
  5. Grok Bot日活连涨16天破60万,马斯克称增速前所未见

    财联社10月31日讯(编辑 马兰)SpaceX研发的人工智能助手Grok Bot用户规模正在有序增长。据报道,其日活跃用户已连续16天增加,创下发布以来的最长增长纪录,日活用户从9月初的不到10万增长至10月26日的超过60万。此前,马斯克还在X上公开表示,Grok Bot的用户增长速度比他见过的任何产品都要快。他还强

    来源 腾讯网
  6. 马斯克转发Grok Bot日活,强调没有免费的了

    1.从9月 6日约 6.7 万,涨到10月 26日的约 60 万,50天里涨差不多9倍。2.9 月底到10月10日左右,大约在 30 万到 34 万之间横了一小段路,之后变陡。3.数据来自 Similarweb,只统计 iPhone 和 Android 手机端,全球范围。需要注意的是,第一,只算手机端:桌面端的用户没有

    来源 腾讯网
  7. GPT-6 Luna评测:材料约束降15.9分,代码执行升19.7分

    GPT-6 Luna今日Smoke评测中材料约束从87.90分跌至72.00分,降15.9分,代码执行从74.30分升至94.00分,主榜反升3.7分至84.10分。工程判断降25分,任务表达升33.7分。单日10题抽签波动可能是主因,需持续观察一致性。

    来源 AI 行业观察
  8. GPT-6 Luna评测:材料约束跌15.9分,代码执行涨19.7分

    GPT-6 Luna今日Smoke评测中材料约束从87.90分跌至72.00分,降15.9分,代码执行从74.30分升至94.00分,主榜反升3.7分至84.10分。工程判断降25分,任务表达升33.7分。单日10题抽签波动可能是主因,需持续观察一致性。

    来源 AI 科技快讯
  9. xAI孟菲斯数据中心污染诉讼获准推进,燃气轮机合规争议待审

    美国联邦法官裁定,NAACP针对xAI数据中心空气污染提起的诉讼可以继续推进,驳回了xAI要求驳回案件的动议。原告指控这家马斯克旗下AI公司在孟菲斯为超级计算机供电的燃气轮机违反《清洁空气法》。该案被视为AI算力狂飙与社区环境正义碰撞的标志性样本,也将检验现行环保法规能否约束超大规模数据中心的现场发电行为。

    来源 AI 科技快讯
  10. Anthropic 9000亿美元算力承诺:IPO文件里的风险与Claude限额调整

    2026年10月底,AI行业在狂飙中暴露出隐忧。Anthropic被曝背负近9000亿美元算力债务,Wiz报告指出九大开发平台集中遭遇安全攻击。与此同时,Grok接入支付宝降低国内门槛,Vidu视频模型上云,开源语音克隆技术进一步普及。本期梳理了这些关乎钱袋子、数据安全和开发工具链的关键变动。

    来源 AI 应用前沿
  11. AlphabetQ3每股收益2.12美元:资本支出514亿美元,现金流承压

    谷歌单日暴跌12.6%,四大云厂商2026年AI资本支出约7500亿美元、自由现金流集体转负,CDS利差与债务风险同步重估;英伟达以信用担保为Nscale、Anthropic算力项目兜底,循环融资经软银、CoreWeave向亚洲蔓延。苹果AI于12月入华、阿里通义千问接棒且Siri AI缺席,FCC通过限制中国检测实验

    来源 钛媒体
  12. 苹果Apple智能国行落地:接入千问,用户可自主选择是否开通

    IT之家 10 月 31 日消息,苹果今日(10 月 31 日)凌晨宣布首批 Apple 智能功能即将在中国推出,并与阿里巴巴达成合作,在部分体验中接入千问。这是 Apple 智能自 2024 年发布以来,国行版本首次获得实质性落地进展。 根据阿里巴巴一同发布的公告,中国用户可以在 Siri、写作工具及视觉智能中,直接

    来源 AI 行业观察
  13. OpenAI、谷歌、微软和 Anthropic 联手推行 AI 数据抓取退出标准

    IT之家 11 月 1 日消息,OpenAI、谷歌、微软以及 Anthropic 近日宣布将采用一项新标准,内容发布方可以借助该标准选择拒绝 AI 抓取自家网站内容。借助这项管控机制,内容发布方可以一次性向多家 AI 企业统一申明自身针对 AI 模型训练的内容使用偏好,而不必为每家企业单独设置规则。 该标准由 Anth

    来源 AI 行业观察
  14. 红果日活1.68亿、半年营收200亿:AI漫剧谁在分钱

    做AI漫剧,内容方得赌爆款,平台却不用押注某一部剧。 一部剧扑了,内容方可能连成本都收不回来,从买IP到制作完成,钱是一笔一笔垫进去的,播出来没人看,这些钱就沉在片库里。 平台不一样,只要用户还在,换一部剧接着播,广告位照样能卖。 所以,这门生意最值得算的是谁掌握着分钱的规则。 01 字节系手里的两张牌。 番茄开放了6

    来源 AI 行业观察
  15. DeepSeek怎么就成了“大肥鱼”:从蓝鲸logo到鲸鱼娘

    最近,B 站评论区闹起了「鱼灾」。 先是有人开了个「Claude 大小姐在运营」的账号,让 AI 负责选题、制作和运营。第二天,「DeepSeek 鲸鱼娘在运营」跟着上线,第一条视频播放量就超过了 200 万

    来源 快科技
  16. Apple智能国行版11月4日开放测试:Siri可调用阿里千问

    目前,苹果中国官网目前已上线Apple智能国行版专属介绍页面,并公布了完整的兼容设备清单,包括iPhone 15 Pro、iPhone 15 Pro Max、iPhone 16全系及后续新款机型。值得一提的是,苹果与阿里巴巴达成合作,在部分Apple智能体验中加入对千问的支持,中国用户可以直接在Siri、写作工具以及视

    来源 TechWeb
  17. Apple智能国行版11月4日开测:12月正式上线,Siri可调用千问

    目前,苹果中国官网目前已上线Apple智能国行版专属介绍页面,并公布了完整的兼容设备清单,包括iPhone 15 Pro、iPhone 15 Pro Max、iPhone 16全系及后续新款机型。值得一提的是,苹果与阿里巴巴达成合作,在部分Apple智能体验中加入对千问的支持,中国用户可以直接在Siri、写作工具以及视

    来源 TechWeb
  18. 蔡磊谈脑机接口心愿:想靠它再抱一抱儿子

    在2026年bilibili超级科学晚对谈环节,京东集团原副总裁、渐冻症抗争者蔡磊通过视频,分享了一个心愿:如果未来丧失语言和肢体功能,他希望通过脑机接口实现与家人的交流,甚至再次拥抱儿子。

    来源 TechWeb
向下滚动自动加载更多