Claude Sonnet 4.6:Smoke主榜跌11.7分,材料约束单项降19.9

资讯 AI 行业观察 全文 742 字 · 约 2 分钟读完 配图 1 张 分类ClaudeSonnetAnthropic

Claude Sonnet 4.6今日Smoke评测主榜从82.31分跌至70.61分,材料约束从61.30分暴跌至41.40分,降幅19.9分。代码执行小降5分,工程判断反升14.2分。单日10题快测下,材料约束异常下滑值得追踪。

所属频道 大厂动态Claude 与 Anthropic

Claude Sonnet 4.6在今天的Smoke评测里主榜分数掉了下来——从82.31分跌到70.61分,少了11.7分。

得分拆解:材料约束主导跌幅

主榜的构成其实只有两块:代码执行和材料约束,按加权计分。今天代码执行由99.50分退到94.50分,降5分;材料约束则从61.30分掉到41.40分,降19.9分。主榜总跌幅的大头就出在材料约束这一项上,整体排名被它直接拖低。

侧榜方面,工程判断从60.80分升到75.00分,任务表达仍是37.50分,没有变化。诚信评级维持在pass。

成因分析:抽签波动还是真实退化

Smoke评测一天只出10道题,每个维度2题。样本这么小,材料约束单日19.9分的跌幅既可能是抽到的题目不合适,也可能说明模型处理材料忠实度时出现了系统性偏差。代码执行只降5分,还在正常波动区间内。工程判断反倒涨了14.2分,可见模型在侧榜任务上的表现没有跟着一起下滑。

眼下这份数据还分不清是一次性抽签异常,还是能力真的退化了。材料约束的题如果牵涉长文本引用或者指令冲突,一道题答错就足以让分数大幅摆动。

对使用者的含义

受冲击最大的是重度依赖材料约束的场景。企业RAG系统、合同审查工具、知识库问答应用这类需要模型严格照着上传文档或指令办事的地方,应当马上补上人工校验环节。代码执行场景影响相对小,日常写脚本、调脚本照常可以用。

开发者这边,工程判断的上升说明模型在架构设计类任务上还有余力,混合工作流里可以继续让它处理侧榜任务。

战略判断

材料约束单日跌19.9分,已经超出正常抽签的区间,这个信号需要下期数据来验证。明天材料约束若能回到55分以上,这次下跌更可能是题目波动所致;要是继续低于45分,就得考虑模型真实退化的可能。

目前只有一期数据,还撑不起“连续退化”的结论。建议把Claude Sonnet 4.6的材料约束表现加进每日跟踪清单,连看三期再做选型上的调整。


本文由本站编辑组整理与排版,内容基于公开信息核实后归纳发布,与文中提及的产品、公司无隶属关系。我们持续跟踪 AI 领域的模型、产品与行业动态,力求信息准确、表述清晰;文中涉及的名称、价格与功能细节可能随官方调整而变化,请以官方最新说明为准。如发现疏漏或表述有误,欢迎通过站内渠道反馈指正。

相关推荐 按相关度与热度排序

全部资讯 →
  1. Claude连接器升级:工具全屏开在对话旁,可当场改内容

    人工智能与日常办公软件的融合正在迈入全新阶段。Anthropic 近日正式宣布对其 Claude 的交互式连接器进行重大升级。在此前的实时小视图基础之上,新版本允许用户在支持的连接器中,直接在对话旁边打开工具,甚至将其展开至全屏,让 Claude 与用户并肩协作并直接修改内容。该功能目前正在网页版和桌面应用中向所有套餐

    来源 AI 开发者社区
  2. Charlie Reams用Claude Code:19.4万行Lean4零sorry证明三元哥德巴赫

    人工智能在基础科学研究领域的应用正在创造历史。近日,独立开发者 Charlie Reams 借助Claude Code成功完成了对三元哥德巴赫猜想的形式化证明。此次突破累计产出了高达19.4万行且零 sorry 的Lean4代码,所有的数学推理均通过了机器的严格验证。 机器火眼金睛:自主揪出并修补13年前的11处漏洞

    来源 AI 开发者社区
  3. Anthropic封号新规生效:按股权穿透查地区,IPO前清退不合规客户

    11月12日,AI公司Anthropic被称为“Claude史上最严封号机制”正式生效,明确地区准入的穿透式审查标准,目的是封堵壳公司、代理中转等绕开地区限制的方式。 当地时间10月8日,Anthropic发布2026版Claude使用政策更新公告,对可接受使用条款(AUP)与支持地区规则作出细化澄清。 本次新规覆盖全

    来源 AI 行业观察
  4. Claude Fable 5.2登顶两项评测,百度新模型以代码生成场景

    本期速报关注两大模型动态:Anthropic的Claude Fable 5.2在Web开发与智能体评测中表现强劲,但单次任务成本高达10美元以上;百度文心新模型展示通过纯代码生成《后室》场景并快速切换画风的能力,且计划开源。此外,AWS推出跨框架智能体评估系统UAEF,昆腾动力机器人进入物流规模化交付阶段,酒店洗衣机器

    来源 AI 应用前沿
  5. Anthropic发布Claude Mythos 5.2:去护栏版专攻网安与生命科学

    Anthropic推出了Claude Mythos 5.2,这是基于Fable 5.2架构但移除了网络安全和生物安全护栏的专用模型。该模型仅向通过资质审核的机构开放,在漏洞挖掘和蛋白质结构预测上表现突出。测试显示,其在CVE漏洞复现中准确率接近90%,且报告零夸大;在病毒衣壳建模上也实现了突破。文章详细解析了其技术原理

    来源 AI 应用前沿
  6. 文心5.5 Flash Preview实测:9分钟出鼓机、21分钟画傅里叶

    这周的大模型圈格外拥挤,Claude Fable 5.2、Gemini 4 Carbon、Qwen 4 Max Preview 前后脚更新,各家都在集中展示大参数旗舰模型的上限。百度在自己的世界大会前夕开启了一轮密集更新,11 月 5 日开源基座模型文心5.5 Flash Base,11 月 9 日披露参与新模型研发的

    来源 腾讯网
  7. Edge AI Daily 早报(11月13日)

    英伟达黄仁勋辞任触发创始人风险重定价,盘前跌超13%,董事会启动独立调查与永久CEO搜寻;出口管制延伸至交付后审计,百亿美元注资Anthropic。Anthropic IPO认购数倍而估值预期收紧,Claude连接器切入办公。谷歌AI Mode强化搜索分发权,Gemini接入CarPlay;AWS推进Agent生产化与

    来源 AI 行业观察
  8. Anthropic封号新规生效:三类主体禁入,IPO前夜收紧账户风控

    11月12日,AI公司Anthropic被称为“Claude史上最严封号机制”正式生效,明确地区准入的穿透式审查标准,目的是封堵壳公司、代理中转等绕开地区限制的方式。当地时间10月8日,Anthropic发布2026版Claude使用政策更新公告,对可接受使用条款(AUP)与支持地区规则作出细化澄清。本次新规覆盖全部C

    来源 腾讯网
  9. Edge AI Daily 早报(11月14日)

    英伟达黄仁勋辞任触发治理与出口审查重估,股价盘中跌破4万亿美元后修复;微软365全球中断暴露云集中化单点风险。Anthropic IPO获六倍认购并签SpaceX月12.5亿美元算力合同,OpenAI融资150亿美元但亏损扩大;谷歌Gemini 4 Hydrogen与Claude默认模型推进AI执行层,SpaceX拟投

    来源 AI 行业观察
  10. Anthropic IPO定价70至78美元:估值缩至1.4万亿,打法比SpaceX保守

    Anthropic正寻求打破SpaceX创下的史上最大IPO纪录,但在定价策略上,这家Claude开发商选择了一条截然不同的路径——将更多主动权交给机构投资者,而非单方面设定价格。华尔街见闻提及,Anthropic正以每股70至78美元的区间价格向投资者询价,目标完全稀释估值约为1.4万亿美元,计划通过IPO募资最多6

    来源 腾讯网
  11. Anthropic IPO认购超六倍:拟募644亿美元

    据知情人士透露,Claude 开发商 Anthropic 的 IPO 已吸引到可供认购股票约六倍的订单,投资者对这桩有望成为有史以来最大股票发行的热情持续升温。招股文件显示,公司连同联合创始人计划借 IPO 最多募得 644 亿美元,再叠加一笔 260 亿美元的非公开配售,双管齐下为登陆公开市场备足弹药。在 AI 投资

    来源 AI 开发者社区
  12. Anthropic玻璃翼计划:3.8万条AI漏洞仅217条修复

    网络安全公司VulnCheck发布报告指出,Anthropic的“玻璃翼计划”在七个月内利用Claude挖掘了37966个候选漏洞,但公开记录中仅修复217个。文章分析了AI挖洞速度与人工审核、开源维护者修复能力之间的巨大落差,探讨了技术债偿还困境及AI自动修补代码的现实难题。

    来源 AI 应用前沿
  13. 礼来CEO里克斯回应AI十年攻克癌症:愿景美好但难实现

    IT之家 11 月 14 日消息,礼来(Eli Lilly)董事长兼首席执行官戴夫 · 里克斯(Dave Ricks)于 11 月 12 日在 X 平台发布推文,回应 Anthropic 首席执行官达里奥 · 阿莫代伊(Dario Amodei)有关“AI 将在不到十年内攻克癌症等疾病”的预测,称这一愿景“令人向往”,

    来源 AI 行业观察
  14. 黄仁勋辞任英伟达CEO,CFO克雷斯接任临时掌门

    英伟达黄仁勋辞任触发创始人风险重定价,盘前跌超13%,董事会启动独立调查与永久CEO搜寻;出口管制延伸至交付后审计,百亿美元注资Anthropic。Anthropic IPO认购数倍而估值预期收紧,Claude连接器切入办公。谷歌AI Mode强化搜索分发权,Gemini接入CarPlay;AWS推进Agent生产化与

    来源 钛媒体
  15. 礼来 CEO 回应“AI 十年内攻克癌症”:愿景很美好,但不太可能

    礼来(Eli Lilly)董事长兼首席执行官戴夫 · 里克斯(Dave Ricks)于 11 月 12 日在 X 平台发布推文,回应 Anthropic 首席执行官达里奥 · 阿莫代伊(Dario Amodei)有关“AI 将在不到十年内攻克癌症等疾病”的预测,称这一愿景“令人向往”,但实现的可能性不大。

    来源 IT之家
向下滚动自动加载更多