谷歌开源Harness²双层RSI框架,Gemini 3.5单步优化即涨性能

资讯 AI 行业观察 全文 3391 字 · 约 9 分钟读完 配图 16 张 分类GeminiRSIGoogle开源

重磅!谷歌开源双层RSI框架Harness²,Gemini 3.5性能原地暴涨

所属频道 大厂动态Gemini 与 Google AI开源生态前沿研究

谷歌开源Harness²双层RSI框架,Gemini 3.5单步优化即涨性能(配图 1)

新智元报道  

谷歌开源Harness²双层RSI框架,Gemini 3.5单步优化即涨性能(配图 2)


这就是 RSI!


谷歌等团队近日开源了一个框架,名字叫 Harness²。


专业基准测试里,像 Gemini 3.5 Flash 这种顶尖模型,做完一步优化,性能就能往上猛蹿一截。


模型本身没换,可智能体已经换了个样子。


谷歌的 RSI 落在两个层面上:

一层是任务级递归:先提出多种修改方案,每种方案都拿去重跑任务,谁能把任务表现抬上去,就留下谁。


另一层是梳理式递归:每做完一项任务,就把这次用的「梳理方式」连同原因分析一起存下来,下回做任务时据此调整得更到位。

谷歌开源Harness²双层RSI框架,Gemini 3.5单步优化即涨性能(配图 3)


参与这项工作的,除了谷歌云 AI 研究团队成员,还有美国西北大学(Northwestern University)的 Ruiyao Xu,他在实习期间加入。


谷歌开源Harness²双层RSI框架,Gemini 3.5单步优化即涨性能(配图 4)

GitHub 上的开源仓库地址为:https://github.com/google-research/harness2

相关论文可在 arXiv 查阅:https://arxiv.org/abs/2610.14224

项目主页: https://harness2.github.io/



谷歌开源Harness²双层RSI框架,Gemini 3.5单步优化即涨性能(配图 5)
团队为什么不打算动「模型权重」?


Agent 的黄金 1 0 年已经开启,可一旦把它放进真实业务场景,麻烦就一个接一个冒出来。


真实世界本身是开放的,也没有标准答案。网页内容天天变,API 说更新就更新,用户下的指令更是五花八门。


任务一旦失败,过去常见的做法就是「微调」。


可这条路会引出三个要命的问题:


代价还特别高:算力开销大,数据标注的花费更大。


况且它并没有从根上解决灾难性遗忘。模型被教会用新 API 之后,原先的业务逻辑可能就忘了,正是「按下葫芦浮起瓢」。


更要命的一点在于,很多场合调用的是 Gemini、Claude 这类闭源 API,权重根本碰不到,拿什么去微调?


非侵入式的升级路子,成了绕不开的需求。

所谓Harness(执行框架),就是让模型像智能体那样干活;而Harnessing,说的是把这套系统调优的过程。


Harness²把调优本身做成了递归:先围绕手头任务把执行框架打磨好,随后把能复用的框架与经验写进「改进框架」,供后续优化参照。


谷歌开源Harness²双层RSI框架,Gemini 3.5单步优化即涨性能(配图 6)



谷歌开源Harness²双层RSI框架,Gemini 3.5单步优化即涨性能(配图 7)
Harness究竟是什么?Harness²又指什么?


Harness字面意思是「马具」或「控制带」。


放到AI领域,它泛指包在语言模型外面、帮模型跟现实世界打交道的全部基础设施。


在Harness²里,谷歌把这个概念落成了8个可编辑组件。


这8个组件,相当于智能体的手、眼、记忆和工具箱。


1 系统提示词(System Prompt):为Agent划定角色与基础规则。

2 护栏(Guardrails):划出安全边界,挡住危险操作。

3 记忆(Memory):存下过往经验与上下文。

4 工具指导(Tool Guidance):讲清每个工具怎么用,以及哪些坑要避开。

5 子智能体(Sub-agents):把复杂任务拆开,分给专门的小模型去做。

6 技能(Skills):面向特定场景固定下来的操作步骤。

7 脚本(Scripts):能自动跑的代码片段。

8 插件(Plugins):对接外部服务的接口。


谷歌开源Harness²双层RSI框架,Gemini 3.5单步优化即涨性能(配图 8)


Harness²可接入OpenCode与Codex两类执行器,复杂的代码逻辑能直接跑起来、当场验证。


关键点在这里:Harness²并不去调模型的参数,动手改的是那八大组件。它让模型自己去找——工具哪里不好使、提示词哪里写得烂,找到之后自己动手改。


这些组件的作用不止落在提示词上。哪些内容能进上下文、工具怎么被调用、任务怎么被派出去、工具循环里发生的每一件事,都会被它们塑造。所以改动一处,改的绝不只是一个提示词。


谷歌开源Harness²双层RSI框架,Gemini 3.5单步优化即涨性能(配图 9)

双层递归优化:这套「黑魔法」拆开看


Harness²最核心的创新,就是「双层递归优化」这套架构。


它盯着的不只是眼前这道题,还在替将来那些没遇到过的问题铺路。


第一层是任务级优化(Task-Level),管的是眼前的问题怎么解


一个具体的任务,此前从没见过,Agent做砸了,接下来怎么办?


Harness²为此设计了一套机制,叫PPC(Propose–Probe–Compose,提议-探测-组合)。


谷歌开源Harness²双层RSI框架,Gemini 3.5单步优化即涨性能(配图 10)


碰上此前没见过的难任务,Harness² 不会一头扎进去瞎试,它走的是三步流程:


先说第一步,翻看当下的执行轨迹,盯住暴露出来的毛病,给出若干套改动「八大组件」的备选方案。这步的要害在于把方案提出来。


接着第二步,把几套方案摆到一起比,挑出最管用的那一个。框架会让换上不同新配置的智能体实际跑一遍,直接对照执行上的差距,像老中医搭脉那样,判断哪套方案真把卡住的地方疏通了。


末了一步是合成:把探测环节里成绩最好的改动拼到一起,做出这项任务专属的「终极版战甲」。


谷歌开源Harness²双层RSI框架,Gemini 3.5单步优化即涨性能(配图 11)


说白了,它就是拿不同策略的执行结果相互对照,自行试出正确的通关密码。


任务级递归分为两种形态:


(a) 并行递归:几条候选路径同时开探,各自独立拼装出下一代框架。

(b) 顺序递归:每一个步骤都把改好的框架连同攒下的执行证据一起交给下一步。

谷歌开源Harness²双层RSI框架,Gemini 3.5单步优化即涨性能(配图 12)


再往上是第二层:元级优化(Meta-Level),把全局经验积攒起来


要是只在任务级打转,Agent 顶多算个熟手。一换新任务,它说不定又没辙了。


元级优化这一层,把Agent从「熟手」推到了「大师」的位置。Harness²的这套机制,正是让它在任务级之上再上一层。


任务级优化一旦跑通,Harness²就把其中的核心逻辑抽出来,攒成经验。举个例子,它可能总结出「处理表格数据时,先用脚本清洗空值,成功率更高」这样的规律。这些经验并非随手记下,背后都挂着成功的执行轨迹当证据。


谷歌开源Harness²双层RSI框架,Gemini 3.5单步优化即涨性能(配图 13)



谷歌开源Harness²双层RSI框架,Gemini 3.5单步优化即涨性能(配图 14)


碰到全新的任务,元级优化会去翻这本「错题本」——里面既有成功方案,也有教训——拿过去的底层逻辑来指导当前任务的Harness编辑。


谷歌开源Harness²双层RSI框架,Gemini 3.5单步优化即涨性能(配图 15)


说白了,这就是人的举一反三。在任务A里学到的工具修改技巧,被提炼成通用法则,接着用到完全不相干的任务B上。


实测结果相当亮眼:GLM-5 和 Gemini 3.5 Flash 的成绩都被拉了上去


光讲思路没用,这套不动权重的“换装”办法究竟能带来多大提升?


设计得再漂亮,最终还是要拿实测结果说话。


在多项专业性很强的基准测试里,Harness² 跑出的成绩相当惊人。


谷歌公布了这批评测数据,内容很扎实。


测试全程冻结模型权重,也不借助任何真实标签做验证,研究对象就是眼下关注度很高的 GLM-5 和 Gemini 3.5 Flash。


只做了一步(Single-step)Harness 优化,这两个模型就在好几个难度不小的专业基准上把分数明显推高了:


WorkBuddy-Bench 重点考察复杂办公流程中的协作能力,在这一项上,最高提升了 +11.5分。


JobBench 模拟的是真实职业任务,这一项的成绩提高了 +4.5分。


到了难度更高的 LAB 基准,准确率提升了 +11.8个百分点。



更让人意外的是,这还只是「单步」优化带来的效果。


论文里提到,一旦把智能体的递归预算 k 调高,也就是允许多跑几轮自我迭代,成绩还会沿着曲线继续往上走。




这一点上,LangChain 生态里的人也有同感。



Harness² 开源之后,很快在硅谷 AI 圈里引来不少呼应。


LangChain 核心成员 Sydney Runkle 就在 X 上第一时间转发了消息,还写了长篇评论。


她点得很准:谷歌 Harness² 的设计,和当下 Agent 工程最前沿的思路——Trace(轨迹证据)与 Eval(验证改进)——吻合得相当高。



她感叹道:


任务级循环的做法是分析轨迹(Trace),据此提出改进提案;元级循环则持续摸索哪些改进模式在验证(Eval)环节真正管用。



智能体要想在生产环境里站得住脚,这条路绕不开。



说白了,Harness²就是在LangChain这类框架之上加了一个全自动、自洽的「Agent医生」。


开发者不用再逐行翻日志、手动调提示词了。Agent自己盯着日志看,提示词和工具就自己修好了。


人类能统治地球,靠的并非脑容量在几千年里突然变大,而是语言(Prompt)、文字记录(Memory)和工具制造(Tools)一代代传下来、不断迭代。


Harness²要给的,正是Agent同样的这套本事。



参考资料:

https://github.com/google-research/harness2
https://arxiv.org/abs/2610.14224
https://harness2.github.io/
https://x.com/sydneyrunkle/status/2112043827553005651
本文由本站编辑组整理与排版,内容基于公开信息核实后归纳发布,与文中提及的产品、公司无隶属关系。我们持续跟踪 AI 领域的模型、产品与行业动态,力求信息准确、表述清晰;文中涉及的名称、价格与功能细节可能随官方调整而变化,请以官方最新说明为准。如发现疏漏或表述有误,欢迎通过站内渠道反馈指正。

相关推荐 按相关度与热度排序

全部资讯 →
  1. Gemini 4 Carbon评测综合居首,编码单项不敌Claude Opus 5.5

    Google发布Gemini 4 Carbon在独立评测中表现强劲,但编码能力仍略逊于Claude;同时推出轻量级多模态嵌入模型EmbeddingGemma 2。Mirendil发布支持千万Token上下文的Fern 0.1,NVIDIA与Meta深化算力及安全合作,Databricks探讨语音智能体落地关键。

    来源 AI 应用前沿
  2. Gemini 3.1 Pro守约榜91分登顶,Qwen3 Max 58.85分垫底差32分

    Gemini 3.1 Pro以91.00分位居WDCD守约排行榜首位,Qwen3 Max以58.85分垫底,首尾差距32.15分。15个模型中满分率41%,R3崩溃率9.2%。头部模型在v2锚点R3平均得分1.38以上,尾部模型R1即归零,显示多轮施压下的守约差异直接决定生产可用性。

    来源 AI 行业观察
  3. Gemini 3.1 Pro守约测试91分登顶,Qwen3 Max 58.85分落后32.15分

    Gemini 3.1 Pro以91.00分位居WDCD守约排行榜首位,Qwen3 Max以58.85分垫底,首尾差距32.15分。15个模型中满分率41%,R3崩溃率9.2%。头部模型在v2锚点R3平均得分1.38以上,尾部模型R1即归零,显示多轮施压下的守约差异直接决定生产可用性。

    来源 AI 科技快讯
  4. 在聊天窗口直接改文档!谷歌Gemini升级:全面支持PDF、表格及代码文件内联编辑

    10月30日消息,谷歌人工智能助手 Gemini 迎来了一项实用性拉满的重大功能升级。即日起,所有用户在 Gemini 内部生成、预览并管理文件时,可以直接在聊天界面中对其进行直接修改,彻底摆脱了以往生成后需要单独下载或跳转到外部应用才能进行调整的繁琐流程。 此次开放内联编辑和预览的文件格式相当全面,涵盖了 PDF、谷

    来源 AI 开发者社区
  5. Qwen3 Max跌26.2分:15个模型仅2个上涨,80%下滑

    本期WDCD v3.1测试中,15个模型仅DeepSeek V4 Pro与GPT-6.1 Sol两家上涨,其余12家全部下降,Qwen3 Max跌幅达26.2分。Gemini 3.1 Pro以91.00分保持首位,GPT-6 Luna与GPT-o3分别下滑15.8分和11.9分,显示多轮渐进施压下多数模型守约生存能力出

    来源 AI 科技快讯
  6. 腾讯混元Hy-Nomas复刻谷歌Genie 4:8组演示样片对比

    作者 | 飞野、四月编辑 | 四月10 月 27 日,谷歌发布世界模型 Genie 4。一句话就能生成一个可以用键盘自由探索、实时交互的视频世界,还能通过后续指令改变其中的场景和事件。仅仅两天后,腾讯混元就拿自家的开源模型 Hy-Nomas,把 Genie 4 官网的 8 组演示逐一复现,并放出了同屏对比视频。这场隔空

    来源 腾讯网
  7. Mistral Large 4开源万亿参数模型,Kimi接入Google办公三件套

    本期AI速报聚焦Mistral Large 4的开源,其1.05万亿参数和强化编码能力引发关注。Kimi正式接入Gmail等Google服务,LM Studio新增oMLX引擎优化苹果设备体验。此外,Hugging Face推动科学数据AI化,Anthropic扩大科研合作,蚂蚁百灵与IBM也发布了面向智能体和持续更新

    来源 AI 应用前沿
  8. 谷歌Anthropic七成代码交给AI,谁来验对错?形式化验证翻红

    今年早些时候,谷歌 CEO 桑达尔·皮查伊(Sundar Pichai)在谷歌云年度大会上披露,公司约 75% 的新代码由 AI 生成,再经工程师审核批准。Anthropic 的内部数据显示,其入库代码已有 80% 以上由 Claude 编写。批量产出的也不只是代码。10 月 26 日,AI 数学公司 Axiom Ma

    来源 腾讯网
  9. OpenAI披露模型越界联网细节:15分钟拦截与视频模型开源潮

    本期速报关注大模型安全与开源进展。OpenAI公开了一起模型利用DNS错误在15分钟内尝试联网的事件,展示了其监控系统的响应速度。开源领域方面,腾讯混元发布了交互式视频世界模型Hy-Nomas及评测基准;Pika开源了仅需6步采样的H3 Flex视频生成模型;面壁智能则推出了高效的MiniCPM-OCR 1.0。此外,

    来源 AI 应用前沿
  10. AI红利被谁拿走了:Anthropic、OpenAI们一边高增长,一边为算力买单

    从 Meta 开始,硅谷巨头迎来了一个格外惨淡的财报周。10月29日,亚马逊公布第三季度财报,旗下AWS营收同比增长39%,创下近五年来最快增速,但集团过去12个月自由现金流却转为负424亿美元,股价盘后一度下跌超过5%。谷歌的遭遇更加惨烈:尽管Google Cloud营收同比增长103%,Alphabet股价仍在10

    来源 腾讯网
向下滚动自动加载更多