蚂蚁灵波:5000小时数据如何破解机器人手感难题?

资讯 AI 应用前沿 全文 3360 字 · 约 9 分钟读完 配图 14 张 分类FableAnthropic模型发布大模型机器人

Anthropic的Fable 5.2展示了通用大模型在机器人操作上的潜力,但精细操作仍依赖高质量触觉。蚂蚁灵波发布LingBot-Touch,通过近5000小时真实触觉数据预训练,统一了视触觉、磁触觉和压阻式三种传感器信号。实验显示,该模型能显著提升不同灵巧手在拧瓶盖、旋转物体等26项真机任务中的成功率,且具备跨硬件

所属频道 大厂动态模型发布机器人与具身智能

通用大模型频频亮出本事,可机器人真正缺的,是那只手上的“感觉”。

这几天,AI圈子又被机器人相关内容占满了屏幕。Anthropic 最新的旗舰模型 Fable 5.2 在演示中把魔方复原、瓶盖拧开,还画出了机器人。RoboDojo 基准测试里,它跑出 64.9% 的成绩,压过不少专攻机器人控制的 AI 系统。

图片

从 GPT-6 Astra 一路到 Claude Fable 5.2,这些通用模型其实在说明一件事:将来机器人或许不必每个动作都单独写一套代码,交给一个“大脑”统一指挥就行。

图片

可演示视频里的顺滑,跟现实环境中的稳定操作,中间还差着一道坎。这道坎,就是物理世界里那些细小的变化。

图片

就说拧瓶盖,人干这活儿想都不用想,机器人做起来却难如登天。手指先得摸到该抓的位置,劲儿使大了瓶身会变形,使小了就打滑拧不动。指尖挪动几毫米、受力稍微抖一下,成败就在此一举。光靠眼睛看(视觉)和脑子算(空间规划)不够用,还得有“手感”,也就是触觉。

图片

具身智能的一个要害痛点也就在这里:怎么让机器人拿到跟人一样通用、一样细腻的触觉?

图片

蚂蚁灵波(Ant Group Lingbo)这支国内团队选择的路,是做“具身原生”的基础模型。他们今天推出触觉基础模型 LingBot-Touch,想攻克的就是不同机器人、不同传感器之间“手感”无法通用这个难题。

图片

机器人的“手感”,为什么没法共享?

图片

触觉这词听着不复杂,无非是知道碰没碰上、使了多大劲。但落到工程上,坑大得很。

图片

头一个问题是传感器种类太杂。眼下主流的技术路线,起码有以下三种:

图片

  1. 视触觉:在指尖装一颗微型摄像头,观测弹性皮肤如何变形,据此推算出接触的位置和形状。
  2. 磁触觉:靠软质磁性材料变形后引发的磁场变化,感知有没有接触、受了多少力。
  3. 压阻式:利用材料受压后电阻发生的变化,把压力分布测出来。

图片

这三种传感器工作机理各走各的路,输出信号的格式也完全对不上。输出的东西有的是图像,有的是磁场数值,还有的是电阻值。更头疼的是,各家品牌的灵巧手在传感器数量、摆放位置、采样频率上又各不相同。

图片

要是每种传感器都单独训一个模型,那每换一只手、每换一种传感器,都得推倒重来。成本高不说,先前攒下的经验也全白费。A 机器人练成的“轻捏鸡蛋”手感,B 机器人压根用不上。

图片

蚂蚁灵波团队想做的,是把这些异构数据“翻译”成同一种语言,让模型掌握背后共通的物理规律,而非死记某一类传感器的信号。

近5000小时真实数据,统一“触觉语言”

团队为此收集了近5000小时的真实触觉数据,覆盖46万多个交互片段、约13.3亿帧。放在触觉领域,这个量级相当可观。

数据来源分两块:三分之二由佩戴触觉手套的人类操作员贡献,他们在日常中完成各种抓握、旋转、滑动;三分之一来自遥操作机器人,用搭载Sharpa Wave灵巧手的双臂系统采集。人机混合的采集方式,既保证了多样性,也补上了机器人特定硬件下的真实交互信息。

数据到位之后,接着是处理。团队设计了一套基于JEPA(联合嵌入预测架构)的训练方法,取名Tactile-JEPA。

核心思路分两步。

第一步是空间对齐。

不同传感器的感知单元(Taxel)数量和位置各不相同。团队建立了一个统一的标准化指尖几何坐标系,把所有传感器的感知单元映射进这个三维空间。每个触觉信号Token都带上“五维地址”:时间、手指编号,以及三维空间坐标。这样一来,模型就能知道信号来自哪根手指的哪个位置、发生在什么时候。

第二步是统一编码。

团队没有硬把三种传感器的原始信号改成一样,而是给每种传感器配了轻量级的Tokenizer(分词器),转成统一接口的触觉Token。随后这些Token进入同一个共享主干网络(Haptic Transformer,简称HaT)学习。

这样做的好处是:底层保留各传感器的特性,高层学习通用的接触规律。比如视触觉看到的皮肤凹陷,和压阻式感受到的压力增加,在高层特征里都对应“接触发生”这一物理事实。

训练策略上用的是潜在空间预测。模型会遮住部分触觉信号,再根据剩下的信息去预测被遮挡部分的特征。触觉数据大部分时间是“零”(没接触),直接重建原始信号的话,模型会偷懒去预测背景噪声;放到潜在空间里预测,就能逼它去学真正有意义的接触动态变化。

真机测试:成功率大幅提升

理论再漂亮,也得上手试。团队在Sharpa Wave和XHand1两款不同的灵巧手上做了大规模验证。

先看模型懂不懂触觉。

冻结编码器的评估中,LingBot-Touch表现不错:30-50N测力范围内,接触力预测误差低于2N;接触中心定位误差达到亚毫米级;还能准确预测未来时刻的受力变化。可视化结果显示,模型学到的特征能平滑反映接触过程的动态演变,说明它确实“理解”了触觉的时间连续性。

再看能不能干活。

团队选了26项真机操作任务,涵盖物体旋转、精细抓取、易碎品操作等,把LingBot-Touch作为触觉模块,接入Diffusion Policy、π0.5、LingBot-VLA和T-Rex四种不同的动作模型。

结果很直观:加上LingBot-Touch之后,所有动作模型的成功率都涨了。

以Sharpa Wave为例,π0.5的平均成功率从47.56%跳升到68.58%;LingBot-VLA从45.60%提升到72.51%。在XHand1上提升同样明显,π0.5从49.71%涨到74.17%。

这说明LingBot-Touch提取的触觉表征是通用的,下游换成什么控制算法都能受益。不必为每个新算法重新训练触觉编码器,这点对工程落地很关键。

仿真环境下的极限挑战也值得一看。

12项仿真任务中,LingBot-Touch平均成功率达到68.95%,比不用触觉的方案高出47.53个百分点。需要持续调整的任务里优势尤其大:盘子旋转任务成功率高达97.4%,比基线高出14.5个百分点;球体平衡这种高难度任务,没有触觉的策略成功率是0%,用了LingBot-Touch后,Sharpa Wave达到67.7%。

训练曲线也显示,引入LingBot-Touch后,强化学习策略在早期就能拿到更高的累计回报,收敛更快、更稳。这意味着高质量的触觉表征降低了策略学习的难度。

对比竞品与规模效应

现有触觉模型FTP-1被拿来做了横向比较,LingBot-Touch在各项指标上均占优。接触力恢复任务里,误差从FTP-1的2.31N降到0.81N;空间感知方面,接触中心定位误差则由2.19mm收窄到0.12mm,精度提升了一个数量级。

落到真实机器人操作上,接入LingBot-Touch的策略平均成功率达到82.2%,接入FTP-1的则为67.5%。

团队同时验证了“大力出奇迹”是否成立,也就是Scaling Law。预训练数据从1000小时加到4000小时,模型性能一路往上走。可到了5000小时,小模型HaT-Tiny的性能开始趋于饱和;这时换上更大的模型骨干HaT-Small,性能又能随数据增加继续提升。

这说明触觉基础模型同样遵循规模法则——数据越多、模型越大,效果越好。后续想靠扩大数据规模来提升机器人智力,这条路也因此有了方向。

具身原生的未来:寻找共享的物理规律

回到最初的问题:机器人如何获得通用的物理操作能力?

蚂蚁灵波给出的答案是“具身原生”。在他们看来,机器人的身体结构、传感器布局虽然千差万别,可所处的物理世界遵循相同的规律,摩擦力、重力、形变这些物理量在不同机器人身上是相通的。

LingBot-Touch的价值,正是把这些跨硬件的通用触觉规律提炼了出来。以后机器人换个手、换个传感器,不必从头教它怎么“感觉”,微调即可。这与LingBot-VLA实现的“一脑多机”思路一脉相承,区别在于这次攻克的是更难标准化的触觉模态。

当然,眼下的验证主要还集中在两款灵巧手上,电容式传感器等其他类型尚未覆盖,长程复杂任务也有待进一步测试。不过这一步迈出去,意味着具身智能正在从“专用定制”走向“通用基础”。

当机器人不再需要为每一次抓握重新学习“手感”,它们离真正走进家庭、工厂,或许就不远了。

本文由本站编辑组整理与排版,内容基于公开信息核实后归纳发布,与文中提及的产品、公司无隶属关系。我们持续跟踪 AI 领域的模型、产品与行业动态,力求信息准确、表述清晰;文中涉及的名称、价格与功能细节可能随官方调整而变化,请以官方最新说明为准。如发现疏漏或表述有误,欢迎通过站内渠道反馈指正。

相关推荐 按相关度与热度排序

全部资讯 →
  1. 蚂蚁灵波开源LingBot-Touch:触觉基础模型让机器人摸得更灵敏

    【TechWeb】11月10日消息,蚂蚁灵波科技开源触觉基础模型LingBot-Touch,为机器人大脑补齐关键的触觉感知能力。该模型基于近5000小时真实触觉数据预训练,覆盖磁触觉、视触觉和压阻式三类主流传感原理,可将不同信号转化为同一套触觉表征,供不同灵巧手和动作模型使用,让机器人在“看得清楚、想得明白”的同时,进

    来源 腾讯网
  2. Anthropic Fable 5.2机器人控制成功率64.9%,英伟达同日推GR00T 2

    ①Anthropic的Fable 5.2作为通用大模型,在机器人控制方面展现出了突出能力。 ②英伟达推出新一代机器人模型GR00T 2,并发布了机器人学习框架及多项技术。 ③券商指出,大模型厂商的进入将加速具身模型的进展,行业商业化的预期正在持续提升。 当地时间11月9日,英伟达、Anthropic接连发布新品,为机器

    来源 AI 行业观察
  3. Claude Fable 5.2机器人操作得分64.9%,前Optimus研究员加盟

    机器之心编辑部今天凌晨,Anthropic 一口气发布两款顶级模型 Claude Fable 5.2 和 Mythos 5.2。新模型在科学研究方面展示了多项成果,包括通过约 1000 个 AI 智能体协作,仅用 30 小时完成费马大定理证明的形式化。在此次更新中,机器人控制能力也备受关注。在官方的发布文章中,科学与工

    来源 腾讯网
  4. Anthropic更新Mythos与Fable 5.2:编程机器人双强化,冲刺IPO

    图片来源:AnthropicAnthropic PBC发布了旗下两款旗舰人工智能模型Mythos和Fable的新版本。在即将登陆华尔街之际,这家AI公司正试图通过新一轮模型升级,巩固其在人工智能领域的领先地位。Anthropic 表示,计划于周一推出的Fable 5.2能够处理更复杂的软件工程任务,承担机器人控制等硬件

    来源 腾讯网
  5. Anthropic推Fable5.2与Mythos5.2:千个子智能体8天写操作系统

    美国当地时间11月9日,Anthropic 发布 Claude Fable5.2与 Mythos5.2,两者共用同一底层模型,主攻编程、推理与视觉能力,Fable 面向广泛用户开放,Mythos 仅限通过审核的机构。 Fable5.2协调1000多个子智能体连续工作8天,从空文件夹写出可在笔记本启动的操作系统原型,自带

    来源 AI 开发者社区
  6. Anthropic双模型更新:Fable 5.2提速30%,Mythos试水科学计算

    Anthropic集中更新Claude Fable 5.2和Mythos 5.2,前者在ARC-AGI-2基准测试中得分93.8%,后者展示AAV衣壳结构预测能力。官方称千个智能体30小时完成费马大定理形式化,但结果待复现。此外,Google Maps接入AI Studio,蚂蚁集团开源触觉模型LingBot-Touc

    来源 AI 应用前沿
  7. PSI用未发布大模型解题:量子计算二十年悬案有了答案?

    AI初创公司PSI借助Anthropic尚未公开发布的大模型,解决了一个困扰量子计算领域近二十年的基础性问题。这家公司正试图把“AI驱动科学发现”从实验室里的惊艳演示,变成一门可持续的生意。在AI for Science赛道持续升温的当下,PSI的尝试既展现了前沿模型在基础科研中的潜力,也暴露出模型依赖、科学验证与商业

    来源 AI 科技快讯
  8. Anthropic推Claude办公套件:能参会做表生成PPT

    过去几年,AI 大模型公司一直在争夺谁能写出更好的代码、回答更复杂的问题。如今,这场竞争开始转向一个更加庞大、也更加成熟的市场:企业办公软件。 刚刚,Anthropic 在 x 上发布了一系列面向企业和知识工作者的新产品,包括 Claude Meetings、Claude Whiteboards、Claude Shee

    来源 AI 行业观察
  9. PSI用AI破解量子计算二十年难题,想把科学发现做成生意

    AI初创公司PSI借助Anthropic尚未公开发布的大模型,解决了一个困扰量子计算领域近二十年的基础性问题。这家公司正试图把“AI驱动科学发现”从实验室里的惊艳演示,变成一门可持续的生意。在AI for Science赛道持续升温的当下,PSI的尝试既展现了前沿模型在基础科研中的潜力,也暴露出模型依赖、科学验证与商业

    来源 AI 行业观察
  10. 蚂蚁灵波LingBot-Touch开源:5000小时触觉数据预训练

    蚂蚁灵波科技开源触觉基础模型 LingBot-Touch,基于近 5000 小时真实触觉数据预训练,覆盖磁触觉、视触觉和压阻式三类传感器。26 项真机测试显示,接入后动作模型任务成功率提升 14 至 26 个百分点,让机器人“摸得更灵敏”。#机器人触觉##具身智能#

    来源 IT之家
  11. Claude Fable 5.2用8天从空文件夹写出可启动操作系统

    从零开始写一个操作系统,通常是顶尖程序员团队以年为单位计算的浩大工程。如今,AI只用了8天。 据美国科技媒体"有趣工程"报道,Anthropic发布的新模型Claude Fable 5.2,协调1000多个子智能体,从一个空文件夹出发,写出了一个可以在笔记本电脑上启动运行的操作系统。 报道称,Anthropic的Fab

    来源 AI 行业观察
  12. 英伟达GR00T 2机器人模型开源:10万小时人类数据已开放

    henry 发自 凹非寺量子位 | 公众号 QbitAI全体起立!时隔一年半,英伟达的新一代机器人基础模型终于来了!刚刚,在今年奥斯汀举行的CoRL大会上,英伟达GEAR领导朱玉可和Jim Fan,搬出了新一代世界动作模型——GR00T 2。在时长1分半的官方demo中,GR00T 2可以拿剪刀裁标签、安装显卡、擦火柴

    来源 腾讯网
  13. Claude Fable 5.2发布:能玩魔方拧瓶盖,大厂还缺什么数据?

    编辑|山辉继 OpenAI 之后,Anthropic 也开始抢机器人公司的风头了。今天,Anthropic 发布了新模型 Claude Fable 5.2。除了常规的编程、推理能力升级,这次还有一个挺意外的看点:Claude 开始玩魔方、拧瓶盖,甚至能操控机器人画画了。前段时间,OpenAI 的 Astra 就已经在机

    来源 腾讯网
  14. 英伟达GR00T 2:5次示范达95%,产线验证启动

    2026年11月9日,英伟达在CoRL 2026大会发布GR00T 2机器人世界行动模型,五次任务示范后在50项评测任务上成功率达95%,零示范条件下可完成其中40项。富士康用于服务器制造、西门子评估工业场景、Nexuni测试洗衣操作,标志着通用机器人基础模型首次进入多家企业产线验证阶段。同步发布Isaac Lab 3

    来源 AI 科技快讯
  15. Sharpa Wave触觉传感器:加装后成功率为何从39%跌到15%?

    蚂蚁灵波开源触觉预训练基础模型LingBot-Touch,通过"统一坐标+分入口+共享主干+特征空间预测"架构,将磁触觉、视触觉、压阻式触觉三类传感器信号统一编码为触觉Token。实测显示,接入后机器人成功率平均提升20+百分点,且对从未出现在训练数据中的新传感器同样有效。代码与权重已全部开源。

    来源 华尔街见闻
  16. Harness大战

    11月7日,微软发布了一份关于Agent执行系统的技术白皮书,包含一组有点出人意料的测试结果:同样使用Claude Opus 4.8,只换掉Copilot Studio背后的Harness,复杂任务通过率就提高了22.1个百分点。新系统每项任务调用模型的次数几乎翻倍,折算后的输入Token消耗却可以减少21%。 就在十

    来源 AI 行业观察
  17. Claude Fable 5.2登顶最强:千个智能体8天造出可启动系统

    Anthropic 在 11 月 10 日甩出双模型组合拳——Claude Fable 5.2 与 Mythos 5.2 同步登场,官方称:新模型在编码、推理、科研、网安到机器人全面进阶,输出速度最高提 30%、成本降 20%。 编码推理双杀对手 在智能体编码基准 FrontierCode 2.0 上,Fable 5.

    来源 AI 开发者社区
  18. Claude Fable 5.2发布:编程超GPT-6 Astra,多项基准登顶

    Anthropic 今天(11 月 10 日)发布 Claude Fable 5.2 与 Claude Mythos 5.2 两款前沿 AI 模型。官方称,新模型在编码、推理、科学研究、网络安全及机器人等领域均有显著提升,同时输出速度最高提高 30%,成本下降 20%。

    来源 IT之家
  19. Anthropic发布Fable 5.2与Mythos 5.2:token降20%,长任务能力大涨

    赶在IPO之前,Anthropic发布了Claude Fable 5.2和Mythos 5.2。 两者采用同一底座,核心差异为安全权限:Fable 5.2面向通用用户,带有网络安全与生物领域的安全防护限制;Mythos 5.2仅向经审核的机构开放,解除相关限制以支持合规的网络安全、生命科学研究。 新版本最大的升级在长任

    来源 AI 行业观察
  20. 蚂蚁灵波开源LingBot-Touch:532万参数给机器人补上触觉

    新智元报道 毫无预警,Anthropic深夜丢出了下一代旗舰Fable 5.2,直接杀入了物理世界。它的全方位性能碾压Opus 5.5,更是展现出了惊人的泛化能力——哪怕是没见过的新任务,也能轻松驾驭。徒手拼魔方、拧瓶盖、画机器人,安装齿轮并测试齿合,Fable 5.2拿下64.9%的成功率,在RoboDojo测试中轻

    来源 腾讯网
  21. Gemini Robotics 2.5:奔驰产线分拣成功率96%,新增物理安全引导

    Google DeepMind推出最新视觉-语言-动作模型Gemini Robotics 2.5。该模型在任务广度、执行速度和安全性上均有提升,并在奔驰汽车产线的实地测试中,协助Apptronik人形机器人以96%的成功率完成零部件分拣。此外,新模型引入了针对物理安全的实时引导机制,并发布了新的对抗性测试基准ASIMO

    来源 AI 应用前沿
  22. Gemini 4 Carbon开放:长程推理与AI安全实战数据

    Google推出面向复杂长程任务的Gemini 4 Carbon模型,并在FrontierCode基准中取得高分。与此同时,AI安全领域出现新动态:Vercel的智能体审查工具在上线不到一周内发现并自动修复了近6万个代码漏洞。Anthropic发布Claude Mythos 5.2并接入安全扫描,NVIDIA开放日语合

    来源 AI 应用前沿
向下滚动自动加载更多