帕西尼谈触觉与物理AI:机器人需要「手感」,还要跨过哪些瓶颈

资讯 腾讯网 作者:硅谷101 全文 2811 字 · 约 8 分钟读完 分类机器人

过去几年,机器人“大脑”越来越聪明,但要真正走进现实世界,还差一样很重要的东西:像人类一样的触感,能感知物体,理解接触时的受力变化。 那么,如何让机器人真正拥有感知和理解物理世界的能力?接....

所属频道 机器人与具身智能

这几年机器人的「大脑」越来越灵光,可要真正走进现实世界,还缺一样关键的东西——像人那样的触感,能感知物体,也能读懂接触时的受力变化。

那怎么让机器人真正具备感知、理解物理世界的能力?话题得回到Physical AI的发展方向,看看机器人还有哪些技术瓶颈要突破。

许晋诚今天讲的主题是物理AI的

不少人觉得我们公司名字挺有意思,会问为什么叫帕西尼(PaXini)?原因在于人体皮肤里有四种不同的触觉感受器,其中一种专门负责感知纹理和高频振动,就是

手指上的触觉感知很关键。一只手端着装满水的杯子,另一只手拿着鸡蛋,凭触觉我们就能判断该怎么握。大脑处理手指传来的大量触觉信息,帮我们控制力度,鸡蛋既不会滑落,也不会被捏碎。触觉感知因此成了人体与物理世界互动的重要一环。

我们是一家全球领先的

许晋诚我们思考怎么和物理世界互动时,也在想智能如何存在于物理世界之中?这又带出更多问题:AI如果能思考,它能不能理解物理世界?

比如这张图,一个人在擦地板,机器人也在擦地板。机器人做着完全一样的动作,可它真的明白自己在干什么吗?我们擦地板时,要靠操作中的

缺了物理理解的智能并不完整。机器人从知道怎么做,到真的去做,再到稳定可靠地做到,中间还隔着很大的鸿沟。

所以我们想问:下一代AI该是什么样?它不能只理解指令,也不能只对提示词作出反应,还得与世界互动,让事情发生、带来改变。

世界也不是由像素拼成的,我们看世界并不只靠摄像头。现实除了我们看到的,还包括我们摸到、感受到、改变的东西。我们公司想做的,就是再往前推AI一把,让它真正理解物理世界。

这段动图演示的是:机器人借助触觉传感器操作时,能感受到自己是怎么抓住吸嘴、怎么抓取灯泡这些物体的。

在我们看来,AI必须超越观察——看到之后还要作出反应,或者与之互动。为了从观察走到互动,我们做了大量这类实验,希望机器人从被动感知转向主动理解物理世界。只有这样,机器人才能从现实中学习。

许晋诚智能需要的远不止文本这类知识,还需要更多经验。经验是什么?其实就是人类数据。机器人也许知道杯子是什么,知道杯子是圆柱形的物体。但它知道该怎么抓住杯子、怎么和它互动吗?未必。经验教会我们,也教会机器人如何行动、如何操作物体。

想要更多经验,就得建一个经验层,为机器人或物理AI提供经验,因为我们需要感知世界。图上展示的是我们数据工厂里的一个流程:人观察物体、与它互动,然后拿起瓶子,我们就能拿到与这类物体互动的数据。我们要建起这样的AI或机器人数据基础,让机器能从物理世界学习,这是非常重要的一层。

每一次互动,都是向物理世界学习的机会。数据采集不局限在固定地点的数据工厂,我们也希望机器人能在任何地方学习。所以我们提供了这样的设备,让大家在自己家里教机器人。每个教机器人的机会都想抓住,这就形成了

把物理互动转化为智能,也是关键之一。

动图里演示的是我们的一款手套,我们用它来教机器人。这不是遥操,我们用这些数据训练一个小模型,它就能非常精确地完成动作。

感知能力因此很重要,不管是对触觉信号本身的感知,还是与各种物体的交互,都是如此。通过学习,成功率能大幅提升,机器人执行的各种任务都适用。

有了这样的实验、让机器人从中学习之后,评测基准该怎么建?换句话说,怎么评估机器人完成的任务合不合人类的需求?有个很简单的办法:看机器人能不能处理以前从没遇到过的事物,比如它从没见过、也从没操作过的物体。

现实世界才是检验机器人的最终考场——能把这些物体处理好,才说明它具备在真实环境中施展智能的本事。说到底,机器人和物理AI得建立在可衡量的真实世界交互之上,这又绕回了我们的

许晋诚接下来,我想再介绍一下我们的

P是perception(感知),I是intelligence(智能),E是execution(执行)。对每个机器人来说,这三种能力都缺一不可。通过帕西尼的

先说感知这部分。图上是一只搭载触觉传感器的灵巧手,指尖正捏着一根细针,人轻触这根针时,指尖的触觉传感器能迅速感知到外部接触和受力变化,驱动灵巧手作出后撤反应。机器人有了感知能力,就不只是完成一个简单的捏取动作,而是能感知外界接触,与人安全交互。

我们的感知能力建立在自研的传感器芯片之上。

眼下机器人在我们产品线里覆盖了不少形态,关节处的扭矩传感器、末端执行器上的部件都在其中。这项技术远没到天花板,很多还没被想到的需求它都能接住。最近找上门的客户不少,都想在机器人身上装不同种类的传感器,有些应用场景我们此前压根没见过、也没听过,机器人公司提的这些需求挺让人意外。

智能这块,帕西尼建了数据工厂,这是公司的一个重头项目。现在已经能拿到超过100万小时的高精度人类数据,触觉感知信息也在里面。靠着这项技术,我们布了五座数据工厂,这些数据能拿来做预训练、后训练,甚至支撑终身学习,对机器人本体来说分量很重。

可拿到数据之后,机器人怎么从里面学东西?我们为此做了一个面向机器人的飞轮算法模型来做验证。模型自身的作用也不小,或许能帮机器人实现某些能力。语言信息我们照样用,视觉信息和机器人自身的交互信息也会用上。除此以外,触觉感知更关键,我们会把它利用起来。

接着是PIE的最后一块,执行,这也是机器人最要紧的能力之一。感知再完美、大脑再聪明,机器人也得有足够好的执行层,比如完整的本体,以及机器人手这类末端执行器。这些条件齐了,机器人才能在现实世界里转起来、把任务完成。

所以这个执行层我们要自己搭,去设计各种不同类型的机器人手。对不少机器人公司而言,手的设计都举足轻重。帕西尼这边,灵巧手的设计可以开源,提供给有需要的机器人公司。设计上我们也在可靠性方面改了不少,比如主打产品之一的灵巧手。

许晋诚最后说,除了把感知、智能、执行组成PIE,我们也想构建另一种东西。于是就有了两种不同的PIE:一种让机器人具备和物理世界交互的本事,另一种是把开放的生态建好,让每个人都能有自己的机器人,用自己的技术把机器人开发成功。

我们想用一个PIE给未来造出无限可能,也希望每个人都出一份力,构建自己的PIE,或者一起共建我们的PIE。从技术角度看,我们希望人人都能拥有自己的机器人,把劳动力解放出来,在物理世界里多享受些乐趣。那些累人的活和任务,交给机器人去干就好。希望大家喜欢我今天的演讲,非常感谢大家。


以上是许晋诚博士在活动上的分享。当机器人能感知环境,还能从一次次操作里攒下经验,它们离真正挑起更多工作还有多远?

本文由本站编辑组整理与排版,内容基于公开信息核实后归纳发布,与文中提及的产品、公司无隶属关系。我们持续跟踪 AI 领域的模型、产品与行业动态,力求信息准确、表述清晰;文中涉及的名称、价格与功能细节可能随官方调整而变化,请以官方最新说明为准。如发现疏漏或表述有误,欢迎通过站内渠道反馈指正。

相关推荐 按相关度与热度排序

全部资讯 →
  1. 果实进化:具身智能从服务业切入,AI巡检已落地餐饮与食品工厂

    来源 | Tech星球文 | 华卫具身智能行业,正在经历一场微妙而又深刻的变化。过去,机器人公司热衷于展示自己的技术上限:能跳多高、跑多快,又能完成多少复杂动作。但到了下半年,行业开始出现另一种声音。比起证明机器人有多聪明,越来越多人开始关心它们走进真实场景后的表现。最近30天里,行业接连发生了几件具有风向标意义的事情

    来源 腾讯网
  2. 华为云发布具身世界模型,物理AI再迎重磅催化!宇树科技翻红涨超1%,机器人ETF汇添富(159213)全天逆市吸金!人形机器人产业趋势怎么看

    11月16日,A股市场震荡回调,沪指跌0.87%险守3600点,光模块、半导体为代表的双创指数明显承压,部分物理AI标的活跃,宇树科技翻红涨超1%,但板块整体震荡,机器人ETF汇添富(159213)标的指数跌超3%,资金逆市坚挺涌入,机器人ETF汇添富(159213)再度吸金,近3日有两日实现资金净流入。机器人ETF汇

    来源 腾讯网
  3. 菜鸟AI接管国际物流全链路,海外仓机器人上岗迎大促

    【环球网科技综合报道】年末大促季来临,国际物流进入履约高峰。记者获悉,菜鸟正加速推进AI与具身智能在国际物流全链路的规模化应用,以AI决策、机器人执行协同发力,提升全球大促物流保障能力。在跨境履约层面,AI已成为全局调度的重要中枢。AI实时分析全网货量、产能、舱位及末端承接能力,提前识别运力缺口,动态调度航...

    来源 腾讯网
  4. 星舰第15飞:B22助推器返场未果,S42将试塔捕?

    11月14日消息,美国中部时间2026年11月13日下午,SpaceX“星舰” 第15次试飞成功升空。此次任务使用超重型助推器 B22 号和飞船 S42 号,原计划首次实现助推器与飞船双双返回发射场并由发射塔机械臂实施空中捕获回收,同时部署 26 颗第三代星链卫星。但任务并未完全按计划推进。助推器未能按计划返回发射场,

    来源 TechWeb
  5. 星舰第15次试飞:B22与S42首演双回收未成,墨西哥湾落幕

    11月14日消息,美国中部时间2026年11月13日下午,SpaceX“星舰” 第15次试飞成功升空。此次任务使用超重型助推器 B22 号和飞船 S42 号,原计划首次实现助推器与飞船双双返回发射场并由发射塔机械臂实施空中捕获回收,同时部署 26 颗第三代星链卫星。但任务并未完全按计划推进。助推器未能按计划返回发射场,

    来源 TechWeb
  6. SpaceX星舰第15次试飞升空:双回收未全达成,飞船返航待验证

    【TechWeb】11月14日消息,美国中部时间2026年11月13日下午,SpaceX“星舰”(Starship)第15次试飞成功升空。此次任务使用超重型助推器 B22 号和飞船 S42 号,原计划首次实现助推器与飞船双双返回发射场并由发射塔机械臂实施空中捕获回收,同时部署 26 颗第三代星链卫星。 但任务并未完全按

    来源 AI 行业观察
  7. 黄仁勋离任引不满:英伟达机器人工程师辞职

    【TechWeb】11月16日消息,英伟达机器人工程师Darrell Dai(戴达瑞)已通过个人X账号宣布辞职。他在帖子中解释,离职的核心原因是对公司前CEO黄仁勋(Jensen Huang)的离任方式感到失望,认为公司在此事上缺乏透明度和

    来源 TechWeb
  8. 机器人进退货仓:双臂开始抓衣服,森马天猫退货率51.70%

    (本文作者为 具身志,钛媒体经授权发布)文 | 具身志双11结束了,有些订单已经签收了,有些已经开始往回寄了。对消费者来说,消费者只需要在手机上申请退货,把包裹交给快递员,这笔订单已经结束。但对商家来说,后面的工作才刚刚开始。以衣服为例,那些退回来的包裹,要被送进仓库,经过核对、质检、分类、整理,再重新进...

    来源 腾讯网
  9. OpenAI再撤机器人团队:通用模型够用了,中国厂商还在押注“小脑”

    11 月 13 日,机器人学习大会 CoRL 在奥斯汀开幕。OpenAI 预订的 208 号展位空着。没有样机,没有海报,没有人站在那里回答问题。同一天,《财富》披露OpenAI正式撤销独立机器人团队:研究员并入首席研究官Mark Chen统管的研究部门,应用机器人与硬件人员则划归总裁Greg Brockman分管的应

    来源 腾讯网
  10. 又一家机器人公司陷入危机

    导读THECAPITAL潮水退去,才知道谁在裸泳!本文3545字,约5分钟作者 | 戴贤超 编辑 | 吾人来源 | 融中财经近日,有媒体报道称阿米奥机器人原CTO、COO、产品负责人均已离职,团队从峰值约130人收缩到70余人,新一轮人员优化还在进行。这家由小米汽车前智驾量产负责人刘方创立、安克创新领投的工业具身智能公

    来源 腾讯网
  11. 马斯克再创历史 SpaceX首次实现“筷子夹飞船”

    【TechWeb】11月15日消息,美国中部时间11月14日下午,美国太空探索技术公司(SpaceX)的“星舰”飞船在执行了大约22个半小时的飞行任务后,返回得克萨斯州的发射基地,并由发射塔“筷子”机械臂实施“捕获”回收。 这是SpaceX首次成功捕获从地球轨道返回的星舰上面级飞船,为实现星舰完全、快速重复使用迈出关键

    来源 AI 行业观察
  12. 勒布朗预测:5~10年内多数主要战斗将由机器人承担

    IT之家 11 月 14 日消息,由埃里克 · 特朗普(Eric Trump)投资支持机器人公司 Foundation 的联合创始人迈克 · 勒布朗(Mike LeBlanc)表示,未来 5~10 年内,全球大部分主要战斗将由机器完成。 在接受福克斯新闻数字版(Fox News Digital)采访时,勒布朗表示:“我

    来源 AI 行业观察
  13. 马斯克披露星舰V4细节:箭体约70米,发动机增至9台

    马斯克此次披露的核心信息包括:星舰V4箭体长度将增至约70米,推进剂装载量提升超过60%,发动机数量增至9台,并新增3台猛禽真空版发动机。尺寸上,V3星舰长度约为52米,V4增至约70米,增幅约40%;推进剂装载量提升超过60%,意味着单次飞行可携带更多推进剂进入轨道。此次披露发生在SpaceX近期一次星舰试飞之后,该

    来源 TechWeb
  14. 马斯克披露星舰V4方案:70米箭体、9台发动机,运力再升级?

    马斯克此次披露的核心信息包括:星舰V4箭体长度将增至约70米,推进剂装载量提升超过60%,发动机数量增至9台,并新增3台猛禽真空版发动机。尺寸上,V3星舰长度约为52米,V4增至约70米,增幅约40%;推进剂装载量提升超过60%,意味着单次飞行可携带更多推进剂进入轨道。此次披露发生在SpaceX近期一次星舰试飞之后,该

    来源 TechWeb
  15. 华为云联手福龙马推清扫机器人,世界模型已启动预售

    华为正在将人工智能布局从数字世界延伸至物理世界。 11月16日,华为云宣布,与环卫装备企业福龙马联合研制的新一代智能清扫机器人启动预售。其中,华为云将为产品提供CloudRobo开发工具链、感知与规划模型、Agentic运行平台及昇腾云算力。该机器人还引入世界模型,使其不仅能够识别环境,还能对复杂动态物理空间进行推演和

    来源 腾讯网
  16. 机器人学会新技能就忘旧活:英伟达和KAIST提出ACCRUE

    你有没有遇到过这种情况:学会了一门新语言之后,突然发现以前学的那门外语变得生疏了?大脑好像在给旧知识腾地方,新东西进来了,老东西就被挤到角落里蒙了灰。机器人也有同样的烦恼,而且更严重。想象一个在工厂里工作的机械臂,它先学会了拧螺母,表现得不错。过了一个月,工厂来了新订单,需要它学会插销钉。于是工程师...

    来源 腾讯网
  17. 均胜电子交付宇树科技:机器人高算力大脑背包首台落地

    上证报中国证券网讯(记者 韩远飞)日前,均胜电子旗下宁波超平面机器人科技公司正式向宇树科技交付首台机器人高算力大脑背包,双方战略合作从框架协议迈入实质性产品交付阶段。 均胜电子并非个例。在新能源汽车产业增速趋稳的背景下,越来越多汽车零部件企业开始布局人形机器人业务。从浙江的均胜电子、双林股份,到四川的...

    来源 腾讯网
  18. 腾讯总办号召AI时代再创业:不拥抱就是被颠覆

    今日,“腾讯文化”公众号发文《总办号召 AI 时代再创业,“心态归零”》,再度谈及28岁生日这天,腾讯总办对AI时代的机会、挑战与选择的看法。文章指出,面对技术变革的巨浪,没有人是旁观者。所有人都要做出选择。如果不想被颠覆,真正重要的事只有一件:一起动起来。“现在进行的智能革命如果不投入拥抱,就是被颠覆。这是一个生死存

    来源 TechWeb
  19. 腾讯总办喊话AI再创业:不投入拥抱就是被颠覆

    今日,“腾讯文化”公众号发文《总办号召 AI 时代再创业,“心态归零”》,再度谈及28岁生日这天,腾讯总办对AI时代的机会、挑战与选择的看法。文章指出,面对技术变革的巨浪,没有人是旁观者。所有人都要做出选择。如果不想被颠覆,真正重要的事只有一件:一起动起来。“现在进行的智能革命如果不投入拥抱,就是被颠覆。这是一个生死存

    来源 TechWeb
  20. 退货仓里的机器人:从搬箱子到直接分拣衣服

    双11结束了,退货仓里的忙碌才刚刚开始。过去,自动化设备已经接手了不少工作。如今,双臂机器人又开始直接抓取、识别和分拣退回来的商品。一场围绕退货处理的人机分工变化,正在仓库里发生。

    来源 AI 行业观察
  21. 具身智能融资466起1245亿:机器人离干活还差什么

    2026年,资本、模型和制造同时加速,机器人开始批量走下生产线,但下线不等于交付,演示不等于胜任。具身智能能否真正跨越产业之门,取决于技术能否被组织成稳定工作的系统,并在真实场景中持续创造价值。

    来源 AI 行业观察
向下滚动自动加载更多