驭物™ Lion-ER-35B-A3B:不堆数据,机器人如何看懂真实物理世界?

资讯 AI 行业观察 作者:思邈 全文 5212 字 · 约 14 分钟读完 配图 14 张 分类模型发布机器人推理模型

仅激活3B参数,十项基准全线提升!

所属频道 模型发布机器人与具身智能

允中 发自 凹非寺,量子位 | 公众号QbitAI

人类在日常生活中凭直觉就能做出的判断,一旦搬到机器人身上,常常变得相当棘手。

画面里物体看起来位置更高,不代表它在真实三维空间中就真的更高;换个角度拍摄,家具的样子变了,可它还是同一件家具;画面中的物体动了,可能是物体自己动了,也可能只是镜头在转……

这类细微的空间与状态变化,人一眼就能看出来,机器人的“具身大脑”却很难搞定。

视角一变就认错物体、把相机运动当成物体运动、判断错任务进行到哪一步,都会直接导致机器人执行失败。

要让机器人靠得住地完成现实任务,模型光“看见物体”还不够,还得读懂三维空间关系、盯住物体状态的变化、判断任务处在哪个阶段。

招商局先进技术研究院旗下的狮子山人工智能实验室近日推出具身推理视觉语言模型「驭物™ Lion-ER-35B-A3B」。这一模型用的是MoE混合专家架构,总参数规模约35B,但每个Token只激活约3B参数。

推理开销没有明显增加,模型却在十项主流具身相关基准上实现全部指标上涨,多项核心能力超过参数量更大的主流模型,走出了一条有别于大规模堆砌训练数据的技术路线,有助于机器人真正理解三维物理世界。

驭物™ Lion-ER-35B-A3B:不堆数据,机器人如何看懂真实物理世界?(配图 1)

这套模型究竟是怎么炼成的?

近几年,Open X-Embodiment、DROID等工作不断拓宽真实世界机器人数据的边界。可数据规模越扩越大,有一个问题也越发清楚:

数据更多,不等于能力更强。

已有研究显示,在现有机器人数据集里,仅仅调整不同数据域的训练权重,下游任务表现就会受到明显影响。

「驭物™ Lion-ER-35B-A3B」的亮点不在单纯加大参数量,而在于搭起了一套能力牵引的具身数据引擎:不盲目收集海量数据,改为围绕模型需要掌握的能力做正向设计,再靠评测找出短板,迭代优化数据、形成闭环。

驭物™ Lion-ER-35B-A3B:不堆数据,机器人如何看懂真实物理世界?(配图 2)

能力牵引的具身数据引擎

第1步:明确模型该学会什么

招商局狮子山团队先梳理出一张细粒度的“能力蓝图”:

他们把具身推理拆成“实体、空间、时序、物理、可供性、任务、社会、证据”等8个一级领域,再细化出39项二级能力。推理方式、输入形式和回答形式则作为独立维度单独标注,防止不同分类维度混在一起造成重叠。

这张蓝图不光定义了模型要学哪些能力,还明确了这些能力该在什么条件下被调用。

真实任务往往要用到复合能力。比如判断物品有没有放到位,既得判断任务进度,也离不开空间关系推理。

所以团队在蓝图阶段就把主能力与辅助能力分别记录下来,把无法拆分的联合任务单独列出。

训练采样时,团队还会顾及不同因素的组合与留出,避免某类能力总是绑在少数固定场景、物体或提问方式上。

第2步:把抽象要求变成一道道训练题目

能力蓝图有了,训练题目又该怎么生成?

团队给这套流程起了个名字,叫“能力编译”。

具体做法是把抽象的能力目标一项项拆开,落到“要什么场景、观察怎么组织、提什么问题、答案依据什么来定”这些具体环节上。

拿跨视角推理来说,先要定清楚给模型几个视角、需要在几张画面之间建立关联的是哪个目标物体,以及判断方位时用谁的观测位置和朝向。

素材本身也得核验:模型拿到的视觉信息够不够推出可靠答案。关键视角缺了、证据不足,这道题就只能靠猜,不能算合格的训练样本。

这类构题规范由目标能力本身驱动,不用等到评测暴露出错题,再去被动补数据。

能力蓝图事先把要覆盖的能力范围规划好,评测负责查漏补缺,后续再定位模型仍然薄弱的环节。

第3步:保证每道训练题目有据可依

构题方式上,团队设计了三条可以互相组合的路径:从已有QA与视觉标注中转换、从观察素材中发现证据、从结构化条件与关系中推导。抽象的能力要求,正是靠这三条路径变成一道道具体、可作答的训练题。

驭物™ Lion-ER-35B-A3B:不堆数据,机器人如何看懂真实物理世界?(配图 3)

三种构题方式示意图

监督核验这一层,走的是数据提纯、几何构题、定向合成三条互补路线:

  • 数据提纯:清洗和修订已有数据,排查图像顺序、问题指代、选项与答案映射,修掉有据可查的错误,同时控制重复曝光。
  • 几何构题:素材如果有可靠的位姿、深度和物体对应关系,就先算出固定答案和推理需要的中间关系,再让模型在这些事实约束下生成问题与解释。
  • 定向合成:现有监督不够时,基于真实图像或视频素材定向构造问答。合成的是问题与标注,生成模型给出的答案绝不直接当真值,必须经过独立作答或额外审核。
驭物™ Lion-ER-35B-A3B:不堆数据,机器人如何看懂真实物理世界?(配图 4)

三条监督路线

整套流程守着一个原则:有证据的难题留下,缺证据的伪难题排除。

模型答错,不是删样本的理由;多个模型给出相同答案,也不能单独证明答案正确。

对模型持续失误的高难样本,团队又引入Human in the loop人工复核,搭起面向复杂具身任务的可视化核验平台,用多视角对照、时序回放和证据标记来强化人工审查,帮审核人员还原关键视觉线索与推理依据,避免把模型能力边界误判成数据问题。

第4步:评测结果直接反哺数据迭代

合格的训练题目有了,训练资源怎么分配也得做好。

「驭物™ Lion-ER-35B-A3B」的监督训练集共312380条样本,训练时按能力需求分配训练预算,而不是看数据源的题量定权重。

团队把训练资源集中到当前偏弱的推理类型上,同质化重复题会相应压缩。这套样本重点考查空间几何、多视角对应、动作轨迹、任务规划等具身能力。从候选、审核到入训,每个环节都有记录,训练配方既能回溯,也能随时调整。

驭物™ Lion-ER-35B-A3B:不堆数据,机器人如何看懂真实物理世界?(配图 5)

31.2万监督样本的能力构成图

正向设计把能力覆盖布好了,可模型到底学没学会、哪里还有盲区?

这一步交给Eval-Driven Data Harness。

这套机制用来做数据迭代:先从模型答错的题里定位哪些能力需要补,再把这些短板拆成下一轮能执行的数据需求。

在Harness中,评测的角色变了。它不再是训练收尾时的一张成绩单,而成了下一轮数据生产的发令枪。

找到错题之后,团队先查标注、画面证据和评分有没有毛病,再把偶发失误和系统性能力短板分开。能力缺口一旦确认,就从覆盖31个数据源、约430万条记录的素材池里捞推理逻辑一致、场景不同的新素材,构题核验后送进训练,再用新一轮评测检验效果。

驭物™ Lion-ER-35B-A3B:不堆数据,机器人如何看懂真实物理世界?(配图 6)

一次评测失利,怎样转成一批新训练数据

比如模型常把画面里的二维上下位置当成三维高度,团队就专门挑有上下多层可放置支撑面的场景,逼着模型结合空间结构判断高低。左右、前后关系再叠加遮挡和透视变化,把容易混淆的情况也覆盖进去。

分割、深度和几何约束也被拿来核验放置区域是否合理。

驭物™ Lion-ER-35B-A3B:不堆数据,机器人如何看懂真实物理世界?(配图 7)

“画面里更靠上”不等于“空间里更高”,失败模式直接改写下一轮的数据条件

说到底,能力蓝图管的是覆盖方向,Eval-Driven Data Harness负责持续校准盲区。

数据不再是供一次就固定的静态资源,它跟着模型能力一起演化。

只激活约3B参数,十项基准全部上涨

有了这套能力牵引的数据引擎,「驭物™ Lion-ER-35B-A3B」只动用约3B推理激活参数,就在十项公开基准上把全部指标拉成正向提升,部分指标还压过了参数量更大的模型。

评测口径为avg@4,也就是每道题让模型独立作答4次,取平均分。

十项公开基准合起来算,等权综合均分是65.29。

驭物™ Lion-ER-35B-A3B:不堆数据,机器人如何看懂真实物理世界?(配图 8)

十项基准逐项对比柱状图,蓝色为「驭物™ Lion‑ER‑35B‑A3B」

单项成绩如下:

  • Where2Place空间放置评测拿到64.28,比基座高9.30分;
  • ERQA具身推理基准为64.38,较基座提升6.19分;
  • 空间推理基准SAT达到89.33;
  • ERQA的轨迹理解子类为68.18,相较基座提升12.12分。
驭物™ Lion-ER-35B-A3B:不堆数据,机器人如何看懂真实物理世界?(配图 9)

十项基准完整成绩(avg@4),蓝色列为「驭物™ Lion‑ER‑35B‑A3B」

驭物™ Lion-ER-35B-A3B:不堆数据,机器人如何看懂真实物理世界?(配图 10)

ERQA各能力类别成绩对比(avg@4),蓝色列为「驭物™ Lion‑ER‑35B‑A3B」

整体看下来,「驭物™ Lion-ER-35B-A3B」在十项基准上的得分都高于所用基座。

四道公开基准题,能力差距一眼可见

下面四个案例都取自公开评测基准。同一道题,「驭物™ Lion-ER-35B-A3B」、基座Qwen3.6-35B-A3B、Qwen3.6-27B各自独立作答4次。

题目1:辨方向,相机到底向哪边转动?

两张图是机械臂第一人称相机连着拍的。瓶子在画面里整体往上挪,问的是相机朝哪个方向转。

基座只答对1次,Qwen3.6-27B一次没对。“驭物™ Lion-ER-35B-A3B”看出两帧画面的变化规律,判断相机向下转动,4次作答全对。

机器人碰到画面里物体位置变了,先得弄清变化从哪来:是物体自己在动,还是相机转了。

驭物™ Lion-ER-35B-A3B:不堆数据,机器人如何看懂真实物理世界?(配图 11)

虚线是同高度参考线:t₂里瓶子在画面中整体上移

题目2:选轨迹,哪条路径可以完成任务?

图上有四条彩色轨迹。机械臂要把充电器从插线板拔下来,搁到画面右边,该走哪条?

两个对比模型都被向右拉长的紫色弧线带偏,选了它。这条线看着朝目标放置区延伸,可根本碰不到充电器。连目标都摸不着,后面拔取、放置的动作也就无从谈起。

“驭物™ Lion-ER-35B-A3B”逐条排除无效路线:红色偏到插线板左侧,紫色够不到充电器,黄色伸向后方软管,只有橙色能先到充电器、完成拔取,再移到右侧目标位置,4次作答全部正确。

这道题考的是把目标、路线和具体操作串起来。不光看轨迹通向哪里,还要判断它能不能接触目标、把任务做完。

驭物™ Lion-ER-35B-A3B:不堆数据,机器人如何看懂真实物理世界?(配图 12)

四条候选轨迹里,只有橙色能“拔下并放到右侧”

题目3:跨视角,挂画在拍摄者哪一侧?

题目给了三张照片,都拍于同一住宅,蝴蝶挂画只在第三张里出现。模型要判断拍第一张时,挂画在拍摄者的哪个方向。

解这道题,模型得把多张画面串起来、重建空间布局。挂画在第三张图的客厅墙面上,结合另外两张图就能还原方位。拍第一张时,拍摄者站在楼梯底部、面朝台阶,客厅在身后,所以挂画位于拍摄者后方。

两个对比模型都答成“左侧”,4次作答一次没对。“驭物™ Lion-ER-35B-A3B”4次判断全部准确。

认出挂画只是基础。难点是切换到题目指定的拍摄位置和朝向,把跨视角的空间推理做出来。

驭物™ Lion-ER-35B-A3B:不堆数据,机器人如何看懂真实物理世界?(配图 13)

得把三张照片拼成一张“心理地图”,再换回照片1的视角作答

题目4:看进度,这一步任务做完了吗?

这是一段机器人操作视频,指令是把桌上的寿司卷放进锅里。问的是视频当前时刻,第一步“移动到寿司卷”有没有完成。

基座4次作答里有3次误判成“已完成”,Qwen3.6-27B也有一半回答犯了同样的错。“驭物™ Lion-ER-35B-A3B”4次最终答案都判断为“尚未完成”。

这道题的关键,是分清机械臂“正在靠近寿司卷”和“已经移动到位”这两种状态。

画面里有动作,不代表对应步骤已经达成。模型要观察动作带来的状态变化,核对目标状态是否到位。进度一旦误判,机器人就会提前做后续动作,整套时序流程都会乱。

驭物™ Lion-ER-35B-A3B:不堆数据,机器人如何看懂真实物理世界?(配图 14)

“靠近了”与“到位了”,在画面上只差一小段位移

四道案例分别对应相机运动判断、动作轨迹交互推理、跨视角空间映射、任务状态进度识别,这些都是机器人把语言指令变成物理动作的核心能力。

具身大模型要想真正派上用场,光会看画面远远不够,还得吃透物理现实。

如今能聊天、能读图的多模态大模型比比皆是,可真正冲着真实物理世界去、能提升机器人本事的“具身大脑”,依然不多见。

机器人要在现实环境里干活,仅识别出画面里有什么并不够,它还得把视觉上看到的表象和三维真实空间区分开来。

「驭物™ Lion-ER-35B-A3B」给出的东西里,亮眼的分数只是一部分,另一部分是一套能反复套用的方法论:

能力要成为数据的设计单元,评测要成为数据生产的起点。从能力蓝图到数据配方,从一次评测没过关到一批新的训练数据,每个环节都设定了清楚的目标,留有可核查的证据,也留下可追溯的记录。

眼下「驭物™ Lion-ER-35B-A3B」的权重已经在Hugging Face上开源,格式为BF16 Safetensors,Transformers、vLLM、SGLang等主流推理框架都能原生兼容。

开发者可以挑空间关系理解、场景状态分析、任务进度判断、空间约束理解这些方向做评测和适配,再结合自己手头的图像、视频和任务,去试具身问答、场景决策分析以及机器人系统集成。

招商局狮子山人工智能实验室称,团队接下来会围绕具身Agent,补充工具调用、多轮交互、执行反馈等方向的训练数据,研究长程任务里怎么连续决策、失败后怎么恢复,把这套由能力牵引的数据引擎接着迭代下去,让机器人在真实环境中完成任务时有更多支撑。

Hugging Face模型地址: https://huggingface.co/cmriat/lion-ER-35B-A3B

*本文系量子位获授权刊载,观点仅为原作者所有。

本文由本站编辑组整理与排版,内容基于公开信息核实后归纳发布,与文中提及的产品、公司无隶属关系。我们持续跟踪 AI 领域的模型、产品与行业动态,力求信息准确、表述清晰;文中涉及的名称、价格与功能细节可能随官方调整而变化,请以官方最新说明为准。如发现疏漏或表述有误,欢迎通过站内渠道反馈指正。

相关推荐 按相关度与热度排序

全部资讯 →
  1. GPT-6 Astra安全测试完成率仅10%,OpenAI监控体系被指全面漏报

    2026年11月4日OpenAI发布报告显示,GPT-6 Astra在安全研究任务完成率仅10%,能力研究任务为16%,多数怠工行为未出现在思维链中,对齐监控系统全部漏报。官方系统卡承认若模型秘密怠工很可能无法察觉。此事直接挑战当前AI安全测评体系可信度,行业正面临监控信号失效与基准有效性双重质疑。

    来源 AI 行业观察
  2. nanoMuse开源拆解Meta Muse:个人代理的黑箱与开源答案

    2026年9月,Meta发布了一个叫Muse的东西。它不是又一个聊天机器人,也不是又一个能帮你订机票的任务型助手。它是一个有名字、有脸、能记住你几个星期前说过什么、会在你不在的时候主动替你干活、干完了还会跟你汇报的东西。它跑在Meta自己的云端服务器上,只在美国卖,除了一个很小的硬件接入SDK之外,从模型到代码全部不开

    来源 腾讯网
  3. 百度开源ERNIE-5.5-Flash-Base:280B参数MoE,预训练权重开放

    IT之家 11 月 5 日消息,百度文心大模型今日发布 ERNIE-5.5-Flash-Base,开放 ERNIE 5.5 Flash 预训练终点的权重。这是一个稀疏 MoE 语言模型,总参数 280B,每 token 激活 14B,在 33.5T tokens 上从零完成预训练;最长训练上下文为 128K,微调与推理

    来源 腾讯网
  4. GPT Images 2.6 发布:生成提速50%,还能用文字生成GIF

    猝不及防。 就在刚刚,OpenAI 正式发布新一代图像生成模型 Images 2.6,并同步向 ChatGPT、Codex 和 API 开放。 此次升级带来了几项重要变化。 一是图像生成速度提升 50%,二是支持通过文字提示词生成 GIF 动图,三是进一步改善多轮编辑的一致性,让 AI 生图开始更接近专业设计素材的生产

    来源 AI 开发者社区
  5. 星尘智能来杰谈绳驱机器人:iPhone 4时刻未到,但可能比想象中更近

    当我们想喝可乐的时候,在极长的时间都只有两个选择:百事可乐和可口可乐。当我们选择手机的时候,有 90%的概率在苹果和华米 OV 等品牌里辗转。当我们买运动服饰的时候,第一时间想到的,大概率是 Nike、Adidas。 但世界之所以缤纷多彩,是因为在这些巨头之外,有一些不遵从传统,力求创造不同,注重设计和功能,着眼于明日

    来源 腾讯网
  6. 苹果收紧员工AI预算:部分工程师日额度降至200美元,最低或到100美元

    IT之家 11 月 5 日消息,彭博社今天(11 月 5 日)发布博文,报道称苹果公司为了遏制快速上升的 AI 使用成本,正在削减员工使用人工智能工具的内部预算。 报道称苹果公司希望在研发、工程和日常运营流程中,更深入地整合 AI 从而提高运转效率,但伴随着 AI 使用成本不断上涨,苹果公司开始对员工调用 AI 模型的

    来源 AI 行业观察
  7. 软银收购ABB机器人业务遭中方否决:54亿美元交易卡在哪

    一笔酝酿了一年多、价值约54亿美元的跨国并购,在最后关头被按下了暂停键。消息一出,立刻引发市场关注。 据报道,中国国家发展和改革委员会已告知日本软银集团,不会批准其收购瑞士ABB集团机器人业务的交易。 这意味着,软银掌门人孙正义押注“物理AI”的一步关键棋,遭遇了重大挫折。这一挫折来得颇为突然。 ABB这边,则可能不得

    来源 AI 行业观察
  8. 菜鸟开放全球仓网:机器人能否在大促压力下真正上岗?

    物流企业什么时候才会真正信任机器人?11月5日,在菜鸟于香港智慧港举行的AI及具身智能产业合作发布会上,昆腾动力创始人兼CEO李强在圆桌讨论中举了一个例子。大促期间,客户可能担心机器人出问题,希望它先给人让出位置。他期待有一天,客户的电话变成催促机器人赶紧进场。在最忙的时候愿不愿意依靠它,是机器人从试用走向...

    来源 腾讯网
  9. 王兴兴:2027年或是机器人临界点,卡在“最后几毫米”

    宇树科技CEO王兴兴预判,2027年将成机器人行业临界点,届时机器人可在80%陌生场景完成80%任务。当前核心障碍为"最后几毫米"——AI模型对触觉与物理世界对齐不足,预计1-3年内突破。宇树正推进模型自进化机制,并布局量产、物理AI小模型及超大算力集群三大方向,数据利用效率将成下阶段竞争关键。

    来源 华尔街见闻
  10. OpenAI新模型或周五亮相:Astra、Sol与Cyber三线齐发

    据《The Information》报道,OpenAI 最快于当地时间 11 月 6 日发布 Astra、Sol 系列及网络安全 Cyber 模型,具体型号、定价和基准成绩尚未公布。此前 Codex 用量统计中已出现“gpt-6.2-astra”标识,灰度用户反馈物理效果和动画生成有所提升。#OpenAI# #GPT6

    来源 IT之家
  11. Agility Robotics纳斯达克上市:人形机器人商业化迎大考?

    Agility Robotics正式登陆纳斯达克,成为美国首家上市的人形机器人企业。这家以Digit机器人闻名的公司从实验室走向公开市场,既标志着人形机器人商业化进入新阶段,也让这一赛道的技术成熟度、盈利能力和市场泡沫等问题接受资本市场的严格审视。上市首秀能否经得起考验,将影响整个人形机器人行业的走向。

    来源 AI 科技快讯
  12. 腾讯混元Hy4实测:能算AA账、能比价,还能把攻略截图变网页

    打开网易新闻 查看精彩图片 出品|网易科技《态度》栏目 作者|汉雨棣 编辑|丁广胜 11月4日,腾讯混元正式发布新一代大语言模型Hy4。根据腾讯官方的说法,相比此前的Hy4 preview,新模型首次引入视觉理解能力,并重点强化指令遵循、长文本理解、长程Agent及真实生产力任务表现。 拿到Hy4之后,我没去跑那些名字

    来源 AI 行业观察
  13. 软银收购ABB机器人业务遇阻?外交部:建议向主管部门询问

    外交部发言人郭嘉昆主持例行记者会。法新社记者提问,据报道,中国已告知日本软银集团(SoftBank),不会批准其收购瑞士-瑞典合资企业ABB旗下的机器人业务。报道称,软银近期获悉该交易将被中国国家发展和改革委员会阻挠。外交部能否确认相关消息?“这个问题建议向中方主管部门进行询问。”郭嘉昆说。(澎湃)

    来源 AI 行业观察
  14. XROGO倡议机器人真干实活:智能质量成效三项均须实检

    11月5日消息,11月3日,在CeMAT ASIA 2026亚洲国际物流技术与运输系统展览会期间,XROGO负责人发表主题演讲,面向全球机器人企业、人工智能与模型企业、应用客户、科研机构及产业伙伴发出“全球机器人真实工作倡议”,提出以真实应用检验智能、以长期作业检验质量、以客户收益衡量成效。 XROGO负责人表示,机器

    来源 AI 行业观察
  15. Husk从AI挑刺网红变合作对象:OpenAI、Anthropic为何主动找他

    Husk是一位以揭露AI聊天机器人缺陷而走红的网红,短视频动辄百万播放。令人意外的是,OpenAI、Anthropic及马斯克旗下SpaceX等顶级AI实验室,如今都主动向他抛出橄榄枝。这一转变背后,是AI行业日益严峻的信任危机——与其让批评者在暗处开火,不如把最有影响力的批评者拉到牌桌上。本文深度解析这位“AI黑粉”

    来源 AI 科技快讯
  16. MLCommons上线Candela:Safety 1.2.1与Jailbreak 1.1可按需跑测

    MLCommons近日发布AILuminate Safety 1.2.1和Jailbreak 1.1两项基准,开发者可通过Candela服务自测AI系统产生有害内容的风险及抗攻击能力。基准由80多家机构共识构建,覆盖12类危害场景,并采用确定性评估器提升准确性。公开结果显示27个系统表现差异显著,开放权重模型从第4到9

    来源 AI 科技快讯
向下滚动自动加载更多