Anthropic三个内部模型曝光:Model 4超Opus5.5,AECI高出3.9分
听雨 发自 凹非寺 量子位 | 公众号QbitAI Anthropic的三个内部神秘模型,曝光了。 Model 2、Model 3、Model 4。 真名还没....
听雨 发自 凹非寺 量子位 | 公众号QbitAI
Anthropic手里三个没公开的内部模型,被抖了出来。
它们被叫作Model 2、Model 3、Model 4。
官方名字还没放出来,不过训练时间和部分成绩已经流到了外面。
第三方评估机构METR的新报告给出了训练节点:三个模型分别在今年7月、8-9月、9-10月练完。
三个里最能打的是Model 4,在Anthropic的综合能力指数AECI上,它已经压过了Opus5.5。
Anthropic联合创始人Sam McCandlish也出来说话了。
报告里的不少判断他都认:AI确实在给Anthropic的研发提速,但提了多少,很难量得准。
(原来A社创始人也有个Sam啊)
Sam还承认另一件事:这份公开报告砍掉了大量信息。
他清楚,外界想核验METR的分析会因此变得更难。可在他看来,把研发提速的细节摊开,一边牵着商业敏感信息,一边等于给别的公司递上一份「加速路线图」。
三个内部模型,都什么来头
这三个模型的本事差多少?
METR报告里的AECI曲线,给了一个能直接看的参照。
AECI相当于Anthropic版的Epoch能力指数,把多项内部、外部基准的成绩揉在一起,用来观察模型能力随时间怎么走。
△Anthropic模型的AECI得分走势,橙色圆点代表内部模型,绿色圆点代表公开模型
图里能看出来,Model 2的得分和Opus5.5挨得很近,Model 3、Model 4则往上走了一截。
其中Model 4的AECI到了178.6,是这组模型里最高的,比Opus5.5多出约3.9分。
这3.9分是啥水平呢?
按Anthropic以往能力提升的速度来折算,差不多等于3个月的进步。
那Opus 5.5是啥时候发的?一个半月前。
从整体走势看,METR估算,2025年10月以来,Anthropic模型AECI得分的增速大约是之前的1.9倍,几乎翻了一番。
Model 4还有一项表现:进到它AECI评估里的15项基准,成绩全部超过50%。
拿来做对照,约九个月前的Opus4.6,在不少基准上的成绩还不到50%。
图中高亮的曲线对应的是纳入Model 4评估的15项基准,这些基准的成绩全部在50%以上。
这个进步速度确实够快。
面对这种情况,METR反倒开始发愁:能真正把这些模型考住的高难度测试,眼看就要不够用了,往后想测出模型的能力恐怕会越来越费劲。
其实这担心有点多余。基准被刷爆如今太普遍了,发愁的不止METR一家。
Anthropic联合创始人Sam McCandlish也对此作出了回应。
METR报告里的不少判断,他都表示认同:AI确实在加快Anthropic的研发节奏,可具体加快了多少,眼下还难以准确衡量。
Sam介绍,Anthropic把未发布模型的基准成绩、模型进展的估算,还有与研究人员交流的机会都交给了METR,由评估方自行得出结论。
但他同时承认,这份报告里被A社删掉了大量信息,外界想核验METR的分析因此变得更困难。
他还透露,接下来几周Anthropic会发布自家的进展分析。
这份分析将交代内部AI研发的速度、公司相对其负责任扩展政策处在什么位置,以及打算新增哪些安全措施。
Claude能自我进化之后,下一代模型的到来也变快了。
如今的Claude,已经在参与打造自己的下一代。
今年9月,A社曾公开过一组数据:
到8月为止,在人的监督之下,Claude已经主导了26%的模型研发工作;而半年前,这一比例还不到1%。
最新公布的METR报告里,还摘录了多位Anthropic研究员的访谈,他们谈到了AI给研发工作带来的变化。
一位受访研究员说,从冒出想法到把实验跑起来,时间大约少了80%。
在他看来,代码已经算不上主要瓶颈,真正拖住进度的是想法和算力。
另有研究员提到,有了Claude和Agent工具,团队能并行尝试更多思路,连过去根本不会花力气去碰的方向也能探索。
这些说法指向同一点:Claude让研究员把想法变成实验的速度更快,研发团队因此有条件去试更多方案。
照这个趋势发展下去,更强的模型又可能充当下一轮研发的帮手,继续带动后续模型往前跑。
METR也偏向于认为,Anthropic眼下研发提速的大部分,来自AI的广泛使用。
但它同时强调,现阶段的加速主要还是AI辅助人类研究员带来的,完全自主的AI研发贡献尚未成为整体进步的主要来源。
今年9月,Dario还专门撰文,呼吁大家集体放慢脚步:
我们必须放慢提升AI模型能力的速度。
Dario大概是在公司内部看到了某些迹象……
在他看来,今年夏天前后起,AI的进步节奏明显变快。推手正是AI本身——它越来越能帮着造出下一代的AI。
他同时担忧,这一进程会加速到人类来不及理解、也来不及控制这些系统的地步。
可「嘴上喊着刹车,脚下猛踩油门」,向来是A社的惯用套路……
内部模型一个接一个被曝出来,哪有半点放慢的意思😓
熟悉Dario的人都知道,他对安全一向格外上心。
《纽约时报》近日一篇文章也提到,Dario之所以要在技术上争第一,动力恰恰来自他对AI风险的忧虑。
他认定AI可能造成巨大风险,所以想抢在那些不把人类安全当回事的人前头把技术做出来,再交到自己信得过的人手里。
他的设想是:训练照旧推进,但公司得给对齐、防护以及第三方评估留足时间。
A社这边新模型发得火热,安全上到底肯下多少本钱,不妨再看看~
参考链接: [1]https://x.com/METR_Evals/status/2118412183860351084 [2]https://x.com/Sam_McCandlish/status/2118422266669371519 [3]https://www.nytimes.com/2026/11/05/technology/dario-amodei-anthropic-ai.html [4]https://darioamodei.com/post/we-must-pace-the-frontier