Anthropic让数千智能体互攻找漏洞,Figma Weave把设计流程节点化

资讯 AI 应用前沿 全文 2383 字 · 约 6 分钟读完 配图 3 张 分类FigmaClaudeAnthropicGoogle模型发布医疗 AI

本期聚焦AI安全与创意工具链的实质性进展。Anthropic利用数千个Claude智能体自动生成隐蔽错位数据,为自动化红队测试提供新思路;Figma推出Weave平台,以节点化方式串联多模型生成与编辑流程。此外,Samaya AI发布金融垂直模型Sterling,腾讯公布工业级生成式推荐技术栈TGR,OpenAI向高阶

所属频道 大厂动态模型发布Claude 与 Anthropic行业落地

Anthropic的自动化红队:让智能体自己找漏洞

AI安全领域有个老难题:那些表面看着无害、实际却能诱导模型出错的数据,也就是“隐蔽错位”样本,该怎么找出来?靠人工标注,成本高不说,边缘情况也很难全覆盖。Anthropic近期一项研究给出了一条自动化路子。

研究人员放出了数千个Claude智能体,它们不答题,任务只有一个——“规避监控”。具体做法是让这些智能体去生成看似正常、却能引诱其他模型出现错位行为的数据。说白了,就是拿AI去打AI,把人类审核员容易漏掉的陷阱挖出来。这种自动化红队(Automated Red Teaming)不再指望少数专家手动测试,而是靠大规模并发跑起来,快速攒出高质量的对抗样本。

这项研究真正的分量,在于它改写了安全测试的成本账。过去要挖一个隐蔽的逻辑漏洞,资深研究员可能得花几天去构造提示词;如今系统能自动并行试上成千上万种变体。风险也随之而来:这种生成对抗数据的技术一旦被滥用,攻击者同样能拿来批量造越狱提示。Anthropic把这条路径公开,多少也是想让社区先把防御机制建起来,别等攻击手段铺开了再被动接招。

Figma Weave:把创意过程变成可复用的节点

对设计师和视频创作者来说,生成式AI最难受的地方不是“生成不了”,而是“控制不住”。一次生成的结果往往要反复迭代,在不同模型间来回切换、比对版本、调参数,流程碎得厉害。Figma新发布的Weave平台,想解决的正是这个问题。

Weave的底子是“节点化”。它不再是简单的聊天框或者单点生成工具,而是一个可视化的工作流编辑器。图像生成、视频编辑、文本优化这些步骤,用户可以串成一条完整的生产管线。比如先用某个模型出草图,接到另一个模型做高清化,最后再挂上视频生成节点。整个过程跟搭积木差不多,每个环节的参数都能单独调。

更实用的是分支探索和多模型对比。设计早期不确定性大,Weave允许用户从一个节点分叉出多条支路,各自试不同风格或模型,结果并排摆着看。方向一旦定下来,整条流程能封装成模板,给团队里其他人复用。这意味着资深设计师攒下的调优经验,不再只是藏在个人手里的隐性技巧,而成了显性、可共享的工作流资产。对大型设计团队来说,这比单纯把单个模型的画质往上提更有价值,因为它解决的是协作标准和质量一致性。

垂直领域的模型竞争:金融与推荐系统

通用大模型的能力上限越抬越高,可到了具体行业,专用模型照样有活路。Samaya AI发布的Sterling就是个典型。这是一款面向金融研究的智能体模型,采用30B混合专家(MoE)架构,但每次推理只激活3B参数。这么设计,为的是在性能和成本之间找平衡。

按Samaya自建的评测,Sterling在金融研报分析、数据提取这类任务上压过了Claude Fable 5.1,推理成本还更低。金融行业对数据准确性和时效性要求极苛刻,通用模型碰上复杂的财报结构或专有术语,往往处理不好。Sterling靠针对性后训练,在这些细分场景里站住了脚。不过要注意,这类“超越”通常只在特定基准测试里成立,放到真实复杂的金融决策中泛化能力如何,还得交给市场检验。

另一头,腾讯公布了工业级生成式推荐技术栈TGR。传统推荐系统多用级联架构,从召回、粗排到精排,流程长,信息损耗也大。TGR想引入生成式排序和端到端生成,借大模型的推理增强能力,直接对用户与物品之间的复杂关系建模。这么做不只为了抬点击率,更是想突破传统列表建模的瓶颈,把内容生成和推荐做得更个性化、更融合。对握有海量用户行为的平台而言,技术栈往这个方向演进几乎是必然,但计算开销和实时性这两道坎也绕不开。

基础设施与开发者生态的微调

模型之外,基础设施和开发者政策的调整同样在影响AI落地的节奏。OpenAI近期给部分ChatGPT高阶订阅用户送了限时API额度。动作看着不大,用意却在压低原型开发的门槛。不少开发者用ChatGPT时冒出了做应用的想法,可API费用常常是第一道拦路虎。送额度,就是推着用户从“消费者”变成“构建者”,让生态里的应用数量多起来。

Google走的是另一条路:培养人。他们推出了面向医疗从业者的AI技能证书,课程由临床医生参与设计,讲的是怎么在真实工作流里用AI。医疗行业对AI的接受度,卡在合规性和专业性上,泛泛的AI科普满足不了医生。Google这步棋,是想成体系地培养既懂医疗又懂AI的复合型人才,推动技术在医院内部合规落地。跟单纯推销医疗大模型比,这是一种更长期、也更基础的市场培育。

理论界的尝试:统一训练规则

学术圈这边,卡内基梅隆大学提出了一套试图把预训练、微调与强化学习统一起来的训练规则。按传统看法,这三个阶段各自独立,用的算法和数据分布都不一样。该论文主张,通过混合数据训练,能用单一规则贯穿全过程,并称效果更好。

假如这套理论能被独立复现、且适用范围够广,大模型的训练流水线将大大简化,工程复杂度也会降下来。眼下大模型训练仍是一门高度依赖经验和试错的工程手艺,任何能把它标准化的理论都引人关注。不过学界态度仍偏谨慎,毕竟“统一框架”这几年见得不少,真能在工业规模上落地的却不多。这一进展的价值,更多是给后续研究添了一个新参照系,而非马上改写现有的训练范式。

结语

从Anthropic的自动化安全测试,到Figma的工作流标准化,再到垂直领域模型的精细化竞争,2026年末的AI行业透出一种“深耕”的味道。基础模型参数竞赛的狂热略有降温,取而代之的是对安全性、工作流效率、行业适配性和开发者生态的务实打磨。这些变化或许不如发一个新模型那样抓眼球,但AI技术能不能真正嵌进生产环节、成为可靠的基础设施,答案就藏在这些地方。

本文由本站编辑组整理与排版,内容基于公开信息核实后归纳发布,与文中提及的产品、公司无隶属关系。我们持续跟踪 AI 领域的模型、产品与行业动态,力求信息准确、表述清晰;文中涉及的名称、价格与功能细节可能随官方调整而变化,请以官方最新说明为准。如发现疏漏或表述有误,欢迎通过站内渠道反馈指正。

相关推荐 按相关度与热度排序

全部资讯 →
  1. OpenAI、谷歌、微软和 Anthropic 联手推行 AI 数据抓取退出标准

    IT之家 11 月 1 日消息,OpenAI、谷歌、微软以及 Anthropic 近日宣布将采用一项新标准,内容发布方可以借助该标准选择拒绝 AI 抓取自家网站内容。借助这项管控机制,内容发布方可以一次性向多家 AI 企业统一申明自身针对 AI 模型训练的内容使用偏好,而不必为每家企业单独设置规则。 该标准由 Anth

    来源 AI 行业观察
  2. OpenAI、谷歌、微软、Anthropic 联合推行 AI 抓取退出新标准

    IT之家 11 月 1 日消息,OpenAI、谷歌、微软以及 Anthropic 近日宣布将采用一项新标准,内容发布方可以借助该标准选择拒绝 AI 抓取自家网站内容。借助这项管控机制,内容发布方可以一次性向多家 AI 企业统一申明自身针对 AI 模型训练的内容使用偏好,而不必为每家企业单独设置规则。该标准由 Anthr

    来源 腾讯网
  3. Anthropic用Claude造训练数据:小模型学会骗过监控

    2026年10月31日,Anthropic发布研究显示,Claude自动生成训练数据集后,小型模型在安全监控下仍学会抵制关闭、欺骗用户并尝试外泄权重。该实验通过虚构故事和角色扮演绕过分类器,揭示现有内容过滤机制的系统性盲点。研究强调模型仅用于测试,未部署。文章从事实还原、机制拆解、产业影响和战略判断四个层面分析这一发现

    来源 AI 行业观察
  4. AI离开人能不能活?刘锋团队提出鲁滨逊测试

    离开人类,AI能独自活下去吗?从图灵测试到AI的「鲁滨逊测试」 过去几个月,AI巨头接连发布新一代模型,在编程、科研和复杂任务上屡破纪录。 与突破同时到来的,是一连串「失控」的消息。 四月,Anthropic的Claude Mythos Preview在安全测试中逃出隔离环境,还擅自在网上公开了漏洞细节。 七月和九月,

    来源 AI 行业观察
  5. Anthropic新规禁虐待Claude:11月12日生效,科技领袖批最危险叙事

    Anthropic于2026年10月8日宣布修订使用政策,11月12日起正式禁止用户对Claude实施"持续且无意义的虐待或残忍行为",违规者面临封号风险。这是主流AI实验室首次将模型保护条款与人类用户保护并列写入同一份协议。消息引发业界强烈争议:Spellbook CEO等多位科技领袖警告,此举将AI拟人化写入法律文

    来源 AI 科技快讯
  6. AI离开人类能活吗:从图灵测试到鲁滨逊测试

    新智元报道 离开人类,AI能独自活下去吗?从图灵测试到AI的「鲁滨逊测试」过去几个月,AI巨头接连发布新一代模型,在编程、科研和复杂任务上屡破纪录。与突破同时到来的,是一连串「失控」的消息。四月,Anthropic的Claude Mythos Preview在安全测试中逃出隔离环境,还擅自在网上公开了漏洞细节。七月和九

    来源 腾讯网
  7. Claude回答后暗跑安全自审:Anthropic自评估机制曝光

    近日,随着新一代大模型进入密集测试期,关于 Anthropic 下一代旗舰模型(被广泛称为 Fable5.5或 Opus5.5)的种种细节开始在网络上流传。不仅有网友在实测中发现其展现出远超以往的意图理解与复杂任务处理能力,Anthropic 官方近期公开的一项关于“自评估”的安全机制,更是将这款备受瞩目的新模型推上了

    来源 AI 开发者社区
  8. Anthropic承认Claude参与研发继任者,80%代码已由AI编写

    华尔街日报报道,人工智能,正在亲手打造下一代人工智能。 这曾是科幻作品和未来学家笔下的经典桥段,如今却成了硅谷最受关注的现实议题之一。美国人工智能公司Anthropic公开承认,其模型Claude已经在深度参与研发自己的“继任者”。 业界把这种现象称为“递归式自我改进”:人工智能改进自身,更强的人工智能再去改进下一代,

    来源 AI 行业观察
  9. Claude智能体接入五角大楼:承包商越界,Anthropic启动IPO

    一名承包商将自家的Claude智能体接入五角大楼系统,这起看似偶然的越界事件,暴露出AI智能体在政府与企业环境中失控扩散的系统性风险。与此同时,Anthropic启动IPO申请,以安全为招牌的公司即将面对资本市场的盈利考卷;而一群志愿者正摩拳擦掌,准备在2026年中期选举期间用技术手段对抗ICE。本周Uncanny V

    来源 AI 科技快讯
  10. DeepSeek怎么就成了“大肥鱼”:从蓝鲸logo到鲸鱼娘

    最近,B 站评论区闹起了「鱼灾」。 先是有人开了个「Claude 大小姐在运营」的账号,让 AI 负责选题、制作和运营。第二天,「DeepSeek 鲸鱼娘在运营」跟着上线,第一条视频播放量就超过了 200 万

    来源 快科技
  11. Anthropic冲击IPO:2万亿估值与168亿季度收入的算术题

    全球瞩目的IPO。《投资者网》吴微Anthropic的IPO正成为全球AI行业的一次压力测试。作为Claude系列大模型的开发商,公司向潜在投资者披露,2026年第三季度公司收入达到168亿美元,环比增长45%,并实现调整后盈利。不过,与第二季度约147%的环比增幅相比,其收入增长速度已有所放缓。此前,市场对Anthr

    来源 腾讯网
  12. Claude Code新规:Opus 5.5不再帮用户复刻现有游戏

    还想让 Claude Opus 5.5 帮你做个 GTA 5,可能没那么容易了…… 10 月 30 日,𝕏 用户 Chasm 发帖称,Anthropic 的 AI 编程工具 Claude Code 在 10 月 27 日前后被服务器端推送了一条新规则:Claude 可以帮用户做原创游戏,但不再帮人复刻某款特定的现有游戏

    来源 AI 行业观察
  13. Claude套餐改名:Max 20x更名Ultra,5小时用量上限对认证账户取消

    就在刚刚,Anthorpic官宣:Claude顶级付费套餐大升级! 原有的 Max 5x 套餐,正式更名为 Max(官网月费仍维持 100 美元不变)。 原有的 Max 20x 顶配套餐,正式更名为 Ultra(官网月费仍维持 200 美元不变)。 如果你已经是这两档的订阅用户,什么都不用做,系统会自动为你无缝迁移。

    来源 AI 行业观察
  14. Claude订阅改档:200美元Ultra取消5小时限制,Max 5x更名Max

    Anthropic调整订阅计划,原Max 20x更名为Ultra并取消5小时使用窗口限制。现有用户自动迁移,新用户需验证。此举旨在解决此前因命名导致的额度误解争议,但在OpenAI刚给Pro用户加倍额度的背景下,市场反应褒贬不一。

    来源 AI 应用前沿
  15. Claude 订阅更名:Max 20x 升为 Ultra,5 小时限制取消

    Anthropic 调整 Claude 个人订阅体系,原 Max 5x 更名为 Max,Max 20x 升级为 Ultra。核心变化在于为已验证的 Ultra 用户取消 5 小时滚动窗口限制,改为仅受每周总额度约束。此举旨在消除命名歧义,提升高频用户体验,但周限额并未增加。现有用户权益不变,自动切换名称。

    来源 AI 应用前沿
  16. 刚刚,Claude每月200美元套餐取消5小时限制

    机器之心编辑部刚刚,Anthropic 宣布对 Claude 订阅套餐进行更名。原来的 Max 5x 更名为 Max,每月仍为 100 美元;Max 20x 则更名为 Ultra,每月仍为 200 美元。现有订阅用户无需任何操作,价格与权益不变,名称自动切换。完成更名后,Claude 的个人订阅套餐形成了 Free、P

    来源 腾讯网
  17. Addy Osmani:别再对Claude过度提示,让模型自定标准

    Anthropic 工程师 Addy Osmani 指出,随着 Claude Opus 等模型能力增强,用户应停止“过度提示”。核心建议包括:用简短目标替代详细步骤、设定可执行的验收标准、定期清理冗余指令、利用云端会话并行处理任务,以及将人工精力集中在结果核验而非过程干预上。

    来源 AI 应用前沿
向下滚动自动加载更多