Claude Opus 4.7 单日评测:代码执行跌 19.5 分,材料约束升 19.3 分

资讯 AI 行业观察 全文 846 字 · 约 3 分钟读完 配图 2 张 分类ClaudeOpusAnthropic

今日Smoke评测中,Claude Opus 4.7代码执行从94.50分跌至75.00分(-19.5),材料约束从70.00分升至89.30分(+19.3),主榜仅降2分至81.44。工程判断与任务表达同步上升,诚信评级维持pass。

所属频道 大厂动态Claude 与 Anthropic

今天的 Smoke 评测里,Claude Opus 4.7 的代码执行维度从 94.50 分掉到 75.00 分,少了 19.5 分;材料约束则从 70.00 分涨到 89.30 分,多了 19.3 分。主榜总分从 83.48 分降到 81.44 分,只跌了 2 分。

数据事实与维度拆解

Smoke 评测每天只出 10 道题,每个维度 2 道题。主榜由代码执行和材料约束两项构成,工程判断和任务表达归入侧榜。今天主榜的 81.44 分,正是代码执行 75.00 分与材料约束 89.30 分共同算出来的。侧榜方面,工程判断从 55.60 分升到 75.00 分,任务表达从 37.50 分升到 50.00 分,诚信评级仍然是 pass。

成因分析:抽签波动还是模型退化

一天 10 道题的样本量下,题目抽签的随机性是最主要的变数。代码执行和材料约束同时出现接近 20 分的反向变动,说明模型面对不同题型时的表现差距被放大了。反过来看,如果真是能力退化,一般会伴随多个维度一起下滑;可今天侧榜两项都在涨,这更像是题目分布的问题,而非整体能力下降。

材料约束能涨 19.3 分,或许是今天抽到了更看重引用忠实度的题目;代码执行之所以暴跌,可能是因为抽中的代码题需要复杂多步推理,或者本身就是边缘案例。两项得分一涨一跌正好抵消,主榜这才只微降了 2 分。

对使用者的具体含义

对重度依赖代码生成的团队来说,单日代码执行 75.00 分意味着在复杂调试或多文件重构这类场景里,模型输出的稳定性可能不如前一天的 94.50 分。材料约束拿到 89.30 分,则说明在需要严格照着参考文档来的 RAG 场景下,今天的表现比昨天好。

工程判断和任务表达这两项侧榜上行,对需要模型做架构决策或拆解需求的开发者来说,今天用起来会顺手一些。不过主榜的波动也提醒一点:选型不能只盯单日分数,还得多看几天的连贯表现。

战略判断

从今天的数据看,Claude Opus 4.7 主榜得分的变化,主要是代码执行与材料约束随机抵消的结果,目前没有证据支持模型真的退化了。Smoke 评测每天每维度只出 2 题,这种设计本身就会放大波动,单日 19.5 分的降幅仍在正常区间内。

如果下一期代码执行还停在 80 分以下,同时材料约束也回落,那就需要重点验证模型在代码类任务上对题型是否敏感。眼下的数据只反映出抽签波动,还够不上持续关注的信号。


本文由本站编辑组整理与排版,内容基于公开信息核实后归纳发布,与文中提及的产品、公司无隶属关系。我们持续跟踪 AI 领域的模型、产品与行业动态,力求信息准确、表述清晰;文中涉及的名称、价格与功能细节可能随官方调整而变化,请以官方最新说明为准。如发现疏漏或表述有误,欢迎通过站内渠道反馈指正。

相关推荐 按相关度与热度排序

全部资讯 →
  1. 微软365故障波及Claude,Anthropic连发多条通报

    微软 365 遭遇近年最严重故障,波及 Exchange Online、Outlook 等服务近一天半。Anthropic 旗下 Claude 的 Outlook 插件、连接器接连受影响,后续 claude.ai、平台等核心服务又出现验证错误。

    来源 IT之家
  2. 无界前沿开源Fx-Bio-1031:生信盲测超GPT-6与Opus-5

    无界前沿正式开源生物信息大模型Fx-Bio-1031。该模型采用125B参数MoE架构,支持本地私有化部署,确保数据不出域。在Anthropic发布的BioMysteryBench困难子集测试中,Fx-Bio-1031取得70.59%的Pass@5成绩,显著高于GPT-6-Astra和Claude Opus-5。模型具

    来源 AI 应用前沿
  3. Charlie Reams用Claude Code:19.4万行Lean4零sorry证明三元哥德巴赫

    人工智能在基础科学研究领域的应用正在创造历史。近日,独立开发者 Charlie Reams 借助Claude Code成功完成了对三元哥德巴赫猜想的形式化证明。此次突破累计产出了高达19.4万行且零 sorry 的Lean4代码,所有的数学推理均通过了机器的严格验证。 机器火眼金睛:自主揪出并修补13年前的11处漏洞

    来源 AI 开发者社区
  4. Claude Meetings上线:AI成视频会议可见参会者

    人工智能在办公协同领域的应用边界正在被进一步打破。近日,人工智能企业Claude宣布推出处于测试阶段的全新会议功能——Claude Meetings。该功能目前已正式面向 Team(团队版)和 Enterprise(企业版)套餐开放。 核心功能与运行机制:作为可见参会者直接加入通话 作为一款深度融入日常办公流的创新功能

    来源 AI 开发者社区
  5. Claude Code桌面端可以换肤了!颜色、动画背景全由你定

    你在对话框里打一句「帮我做一个深海蓝主题,带粒子动画背景」,Claude会自己写一段TypeScript代码,生成一个mod插件,调用 $.theme.set 接口把背景换掉,再通过 ui.render 钩子把界面各元素(用户消息气泡、Claude回复区、加载动画、侧边栏)颜色全部重新上色。

    来源 凤凰科技
  6. Anthropic封号新规生效:按股权穿透查地区,IPO前清退不合规客户

    11月12日,AI公司Anthropic被称为“Claude史上最严封号机制”正式生效,明确地区准入的穿透式审查标准,目的是封堵壳公司、代理中转等绕开地区限制的方式。 当地时间10月8日,Anthropic发布2026版Claude使用政策更新公告,对可接受使用条款(AUP)与支持地区规则作出细化澄清。 本次新规覆盖全

    来源 AI 行业观察
  7. Claude Fable 5.2登顶两项评测,百度新模型以代码生成场景

    本期速报关注两大模型动态:Anthropic的Claude Fable 5.2在Web开发与智能体评测中表现强劲,但单次任务成本高达10美元以上;百度文心新模型展示通过纯代码生成《后室》场景并快速切换画风的能力,且计划开源。此外,AWS推出跨框架智能体评估系统UAEF,昆腾动力机器人进入物流规模化交付阶段,酒店洗衣机器

    来源 AI 应用前沿
  8. Anthropic发布Claude Mythos 5.2:去护栏版专攻网安与生命科学

    Anthropic推出了Claude Mythos 5.2,这是基于Fable 5.2架构但移除了网络安全和生物安全护栏的专用模型。该模型仅向通过资质审核的机构开放,在漏洞挖掘和蛋白质结构预测上表现突出。测试显示,其在CVE漏洞复现中准确率接近90%,且报告零夸大;在病毒衣壳建模上也实现了突破。文章详细解析了其技术原理

    来源 AI 应用前沿
  9. 文心5.5 Flash Preview实测:9分钟出鼓机、21分钟画傅里叶

    这周的大模型圈格外拥挤,Claude Fable 5.2、Gemini 4 Carbon、Qwen 4 Max Preview 前后脚更新,各家都在集中展示大参数旗舰模型的上限。百度在自己的世界大会前夕开启了一轮密集更新,11 月 5 日开源基座模型文心5.5 Flash Base,11 月 9 日披露参与新模型研发的

    来源 腾讯网
  10. GitLab 19.5 发布:MCP 服务器转正,外部智能体纳入治理

    GitLab 19.5 于 10 月 15 日发布,将智能体软件开发和治理作为平台核心:GitLab MCP 服务器正式可用,同时扩展了外部 AI 智能体与 GitLab 交互的方式。 该版本允许 Claude Code、Cursor 等兼容 MCP 的工具访问更多 GitLab 工具目录,并调用 GitLab Duo

    来源 AI 行业观察
  11. Edge AI Daily 早报(11月14日)

    英伟达黄仁勋辞任触发治理与出口审查重估,股价盘中跌破4万亿美元后修复;微软365全球中断暴露云集中化单点风险。Anthropic IPO获六倍认购并签SpaceX月12.5亿美元算力合同,OpenAI融资150亿美元但亏损扩大;谷歌Gemini 4 Hydrogen与Claude默认模型推进AI执行层,SpaceX拟投

    来源 AI 行业观察
  12. 为什么说Gemini才是目前最被低估的真神?

    有很多宣传自己多模态的模型,其实并没有听觉,比如GPT-6、Claude 5.5,你让他们听声音时,他们可能会回得有模有样,但实则把音频偷偷交给其他工具处理,模型本身听不见声音。

    来源 凤凰科技
向下滚动自动加载更多