英伟达GR00T 2发布:机器人基础模型能同时预测动作与画面

资讯 快科技 全文 3095 字 · 约 8 分钟读完 配图 8 张 分类英伟达

英伟达的夏天 具身模型公司的冬天?

所属频道 算力与芯片

上周,黄仁勋的“大瓜”占满了大家的注意力,英伟达一次重要的技术更新反倒被不少人漏掉了。

11月9日,也就是黄仁勋辞职的三天前,英伟达在美國奥斯汀的机器人学习大会CoRL上,发布了新一代机器人基础模型GR00T 2。

英伟达的夏天 具身模型公司的冬天?

发布会开场,英伟达机器人研究负责人Jim Fan用“凛冬将至”调侃GPT-6 Astra等通用推理模型给机器人研究者带来的冲击:通用大模型都能直接控制机器人了,还有必要专门研发机器人专用大脑吗?

可到了演讲结尾,Jim Fan话锋一转,宣布“夏天来了”。

让他如此乐观的,正是英伟达刚刚推出的GR00T 2。

该基础模型可以从人类视频和别的机器人操作记录里学会技能,后续打算开源。英伟达眼下已经放出10万小时人类第一视角视频数据,模型权重、代码和适配方案预计12月对外开放。

那么,这颗机器人大脑,究竟强在哪里?

GR00T 2,机器人开始预测动作的后果相比此前的版本,GR00T 2的核心进步主要体现在三个方面:

学习方式升级: 从预测机器人动作,进一步发展为同时预测动作和环境变化,让海量人类视频成为训练材料。

跨构型技能迁移: 机器人可以从人类或其他机器人的示范中学习操作技能,减少针对不同硬件重复采集数据的需求。

新任务适配更快: 通过少量示范快速学习新任务,并结合上层推理模型,完成复杂操作和错误恢复。

首先是模型架构的变化。

传统视觉语言动作模型(VLA)主要根据摄像头画面和语言指令预测动作。GR00T 2则采用世界动作模型(World Action Model,WAM)架构,通过一个扩散Transformer,同时预测未来画面和机器人动作。

英伟达的夏天 具身模型公司的冬天?

例如,机器人将零件插入插槽时,模型既要预测机械臂如何移动,也要预测零件接触插槽后,环境会发生什么变化。

这项设计让机器人能够从普通人类视频中学习操作经验,降低对带有控制信息的遥操作数据的依赖。

英伟达公开的信息显示,GR00T 2预训练阶段喂进去的数据包括约40.3万小时人类第一视角视频、1万小时手持夹爪示范,还有2.35万小时机器人遥操作数据。

英伟达的夏天 具身模型公司的冬天?

对照实验里,人类视频的训练量往上加,模型在72项真机任务上的进度指标就从50%升到70%。这组结果也给此前引发不少讨论的Ego数据补上了一份技术层面的验证。

英伟达的夏天 具身模型公司的冬天?

其次是跨构型技能迁移。

英伟达将这项能力称为X-Adapt。简单来说,机器人能够利用人类或其他机器人的示范,学习自己从未执行过的任务。

英伟达的夏天 具身模型公司的冬天?

拿一项化学实验来说,机器人事先没做过这项任务的遥操作训练,只靠人类示范,就能完成给实验漏斗铺滤纸、润湿滤纸的动作,成功率65%。

另一项实验中,YAM机械臂仅通过手持夹爪示范,就能以60%的成功率组装一辆玩具卡车。

当然,目标机器人仍需要一定的通用动作数据,才能让模型适应自身的硬件结构。

更直观的进步,体现在学习新任务的效率上。

英伟达挑了50项目标机器人以前没做过的任务来测。GR00T 2零样本平均成功率是40%;每项任务补一次示范再做微调,成功率升到71%;示范加到五次,平均成功率就到了95%。

英伟达的夏天 具身模型公司的冬天?

这五次示范用到的机器人数据加起来不到3分钟。模型在单张RTX 5090显卡上做轻量微调,耗时约30分钟。

学得快之外,GR00T 2还想解决复杂任务里的错误恢复。英伟达的做法是分层控制:上层推理模型管任务规划和进度检查,GR00T 2负责抓取、插入这类具体动作。零件掉了、任务断了,上层模型可以调用别的工具处理异常,然后再接着执行。

在三类玩具的连续组装测试里,加上这套机制,机器人每类100次尝试成功97至98次;只靠动作模型单独跑,成功次数是71至84次。

英伟达的夏天 具身模型公司的冬天?

人形机器人对实时控制有要求,英伟达为此推出了轻量版GR00T 2 Turbo。它能直接跑在宇树G1搭载的Jetson Thor上,单次动作预测耗时约124毫秒,之后由高频全身控制器执行。

把这些放在一起看,GR00T 2正试图将人类视频学习、跨机器人技能迁移、少样本适配和复杂任务控制装进同一套模型体系。不过这些成绩主要出自英伟达公布的特定实验,离复杂工业场景的长期稳定运行还有距离。

假如这些能力能在更多真实场景里得到验证,机器人厂商以后就有机会直接拿成熟的基础模型来用,再针对自己的硬件和任务做优化。这会给那些从零训练通用机器人大脑的创业公司增添新的竞争压力。

具身模型公司正被巨头两面夹击。戏剧性的是,英伟达发布GR00T 2的当天,Anthropic也推出了新一代通用大模型Claude Fable 5.2。

这款大模型主要面向编程、推理等任务,但已经开始显露机器人操作能力。Anthropic公布的视频里,Fable 5.2控制真实机器人完成了魔方操作、拧瓶盖和绘画等任务。

更值得关注的是测试成绩。在包含42项双臂机器人任务的RoboDojo仿真基准中,Fable 5.2拿到64.9%,前代Fable 5.1是27.6%,GPT-6 Astra是29.8%。

英伟达的夏天 具身模型公司的冬天?

Anthropic称,这一表现已经超过多数专门训练的机器人控制模型。但相关成绩来自Anthropic内部测试,真实机器人演示还没有披露系统性的成功率。

其实OpenAI的GPT-6 Astra此前也展现过类似潜力。今年10月,英伟达发布的一项研究显示,Astra在RoboLab-120仿真基准中借助智能体框架取得74.8%的任务成功率,超过参与比较的多款专用机器人模型。

短板也很明显:单次动作推理平均耗时18.56秒,离机器人实时控制的要求还差得较远。

OpenAI的机器人研发路线也在变。据《财富》11月13日报道,原有的独立机器人研究团队已被撤销,研究人员转到核心模型团队。OpenAI证实了这一调整,并称机器人依然属于公司长期推进的方向。

一系列变化表明,通用大模型正在加速向机器人领域延伸。那么,它们与GR00T 2是什么关系?

从技术路线看,GR00T 2专门学习视频与机器人动作之间的关系,重点解决技能迁移、精细操作和实时控制等问题。GPT-6 Astra、Fable 5.2等通用模型,则凭借视觉理解、空间推理和任务规划能力,开始参与机器人动作决策。

这两类模型之间既有竞争关系,也能互相搭把手。

英伟达给出的分层控制架构就是一个例子:任务规划和结果检查交给上层的通用推理模型,具体动作由GR00T 2完成,最后落到执行层的是底层控制器。

照这个思路往下走,机器人的「大脑」以后可能分得更细——理解与决策多交给通用模型,需要快速反应的物理操作则留给专用模型。

具身模型创业公司面对的压力,来自两个方向。

一头是英伟达:机器人基础模型和开发工具持续对外开放,整机厂商不必再从零开始训练模型。另一头是OpenAI、Anthropic这类通用模型厂商,它们不断把能力往机器人上延伸,专用模型的技术空间可能被进一步挤掉。

不过,通用模型往前走,并不等于具身模型创业公司就没路可走了。

眼下不管是GR00T 2还是Fable 5.2,都还没有证明自己能在复杂的工业场景里长期稳定运行。精密操作、触觉反馈、接触力控制、实时响应、异常恢复,这些环节仍然要做大量工程优化。

换句话说,手里有专有场景数据、硬件适配做得成熟、又有真实客户部署经验的公司,依然能靠这些建立优势。

问题是,基础模型一直在进步,今天还算稀缺的技术能力,明天也许就成了行业标配。巨头一边抬高具身智能的技术起点,一边也抬高了创业公司证明自己价值的门槛。

谁能迎来夏天,谁又要面对寒冬,最后还是得让真实市场来回答。

本文由本站编辑组整理与排版,内容基于公开信息核实后归纳发布,与文中提及的产品、公司无隶属关系。我们持续跟踪 AI 领域的模型、产品与行业动态,力求信息准确、表述清晰;文中涉及的名称、价格与功能细节可能随官方调整而变化,请以官方最新说明为准。如发现疏漏或表述有误,欢迎通过站内渠道反馈指正。

相关推荐 按相关度与热度排序

全部资讯 →
  1. 英伟达机器人学习工程师戴士钦宣布辞职:“黄仁勋离职让我格外失望”

    IT之家 11 月 16 日消息,英伟达机器人学习工程师戴士钦(Darrell Dai)昨日发文,宣布将离开公司。 戴士钦表示,他眼中的黄仁勋不只是英伟达 CEO,他钦佩黄仁勋投资那些一下子看不到明确前景的未来技术。在深度学习热潮到来之前,黄仁勋就已投入 CUDA,并在人工智能成为所有人关注焦点之前布局 AI 领域。这

    来源 AI 行业观察
  2. 黄仁勋辞职,周鸿祎:美国对华芯片政策分歧才是关键

    【TechWeb】11月14日消息,英伟达创始人黄仁勋突然辞职后,360创始人周鸿祎接连发布多条视频表达观点。他认为,英伟达失去的不只是一位CEO,更是一位能提前十年判断技术方向的创始人,若处理不当恐重蹈苹果当年赶走乔布斯的覆辙;与此同时,黄仁勋的离开也折射出美国对华芯片政策背后的深层博弈,但中国AI的发展不会因外部.

    来源 腾讯网
  3. 黄仁勋谋划回归英伟达:16万签名与国会质询同时压来

    【TechWeb】11月16日消息,据英国《金融时报》最新消息,四天前刚辞去英伟达CEO职务的黄仁勋,正在硅谷盟友的簇拥下谋划一场“快速回归”。 而在华盛顿,一场以“国家安全”为名的政策围猎,早已在他下台之前便已布好棋局。 本周,美国AI圈即将上演两件大事:黄仁勋的国会闭门质询、Anthropic的万亿IPO。 “黄仁

    来源 AI 行业观察
  4. 黄仁勋谋划回归英伟达:国会质询与Anthropic IPO本周登场

    英伟达董事会夹在两股方向相反的力量之间,独立调查仍在进行,而这场角力的走向,将直接定义这家市值数万亿美元芯片巨头的未来权力结构。另外,Anthropic代表的一种更隐蔽、更系统性的产业政策游说对此次黄仁勋下台事件的影响也被媒体曝光。另外,美国参议员Chris Coons在针对黄仁勋的指控出炉后迅速公开发难,而他今年七月

    来源 TechWeb
  5. 黄仁勋谋划回归英伟达:16万人联署,国会质询与万亿IPO同周登场

    英伟达董事会夹在两股方向相反的力量之间,独立调查仍在进行,而这场角力的走向,将直接定义这家市值数万亿美元芯片巨头的未来权力结构。另外,Anthropic代表的一种更隐蔽、更系统性的产业政策游说对此次黄仁勋下台事件的影响也被媒体曝光。另外,美国参议员Chris Coons在针对黄仁勋的指控出炉后迅速公开发难,而他今年七月

    来源 TechWeb
  6. 戴士钦离开英伟达:黄仁勋辞职令他格外失望

    IT之家 11 月 16 日消息,英伟达机器人学习工程师戴士钦(Darrell Dai)昨日发文,宣布将离开公司。戴士钦表示,他眼中的黄仁勋不只是英伟达 CEO,他钦佩黄仁勋投资那些一下子看不到明确前景的未来技术。在深度学习热潮到来之前,黄仁勋就已投入 CUDA,并在人工智能成为所有人关注焦点之前布局 AI 领域。这些

    来源 腾讯网
  7. 黄仁勋辞职后盟友筹建“作战室”,力推创始人回归英伟达

    深陷丑闻数日后闪电辞职,黄仁勋却可能很快重返英伟达。据Ars Technica报道,其核心圈子正组建非正式“作战室”,试图推动这位创始人重新掌舵。这场围绕个人与公司的博弈,折射出AI芯片巨头在公司治理与创始人光环之间的深层张力:英伟达卖的不只是芯片,还有一张由黄仁勋本人书写了十余年的路线图。

    来源 AI 科技快讯
  8. 黄仁勋或再任英伟达CEO?硅谷盟友施压董事会推动回归

    IT之家 11 月 16 日消息,据英国《金融时报》昨天报道,黄仁勋正考虑重返英伟达担任首席执行官。如今他在硅谷的多位盟友正向英伟达董事会施压,要求公司重新任命他。 据多名知情人士透露,黄仁勋已经和亲信讨论了重返公司的可能性。与此同时,英伟达董事会还在开展独立调查。 一位黄仁勋的盟友表示,他们正在组建一个由硅谷高管构成

    来源 AI 行业观察
  9. 黄仁勋或重掌英伟达:硅谷盟友组建"作战室"游说,Arm CEO被曝接触

    今日热点导览 OpenAI解散机器人团队 SpaceX首次实现“筷子夹飞船” 2026年版国家基本医保药品目录发布,新增107种药品 微软就全球服务中断道歉 加密货币全线大跳水,超31万人爆仓 TOP3大新闻 黄仁勋讨论重掌英伟达,硅谷盟友游说支持回归 据报道,在被董事会驱逐数天之后,英伟达公司前首席执行官黄仁勋正在讨

    来源 AI 行业观察
  10. 黄敏珊晋升加快:黄仁勋接班人还差十年?

    黄仁勋女儿黄敏珊2020年加入英伟达,已晋升为物理AI产品营销高级总监,影响力超出职位本身。前员工认为她像父亲一样坚毅敏锐,但职业背景在商业和营销领域,缺乏引领技术战略的经验,短期内难以接班,十年后接掌公司则有可能。

    来源 凤凰科技
  11. 黄仁勋去职风波:马斯克等科技高管联名请愿,11.5万签名要求复职

    11月14日报道,埃隆·马斯克等科技公司高管联名签署请愿书,呼吁英伟达董事会恢复黄仁勋的CEO职务。截至周六下午,该请愿书已获得超过11.5万个签名,其中包括5965名英伟达现任员工、1108名前员工及63063名股东。 公开支持者还包括特斯拉和SpaceX CEO埃隆·马斯克、Replit CEO

    来源 AI 开发者社区
  12. 英伟达遭遇多线挑战:AMD、谷歌、亚马逊追赶,大客户自研芯片提速

    英伟达在AI芯片市场的统治地位正面临前所未有的挑战。即便没有黄仁勋近期的风波,AMD、谷歌、亚马逊等竞争对手的追赶步伐也已明显加快,而大客户纷纷自研芯片更让这家芯片巨头腹背受敌。分析人士指出,这场混乱可能成为挑战者撬动英伟达护城河的绝佳窗口。本文剖析英伟达真正的结构性风险,以及这场AI算力霸主之争的下一步走向

    来源 AI 科技快讯
  13. 黄仁勋与英伟达深度绑定:AI行业会否被一家公司拖累?

    TechCrunch文章抛出一个尖锐问题:如果黄仁勋和英伟达遭遇坏消息,是否意味着整个AI行业也将承压?摘要指出,Jensen几乎等同英伟达,而当前AI经济高度依赖英伟达。本文围绕这一判断,分析英伟达在AI算力、资本市场与产业信心中的枢纽角色,并讨论风险集中可能带来的连锁反应。

    来源 AI 科技快讯
  14. 黄仁勋离开英伟达:AI算力底座换帅,订单与担保还能靠得住吗

    “随便吧(whatever)”。“我不在乎了(I don't care)”。 最后时刻,英伟达CEO黄仁勋极度疲惫。那个向来精力无限、替AI签字的人,那个曾经连供应商产能、客户融资和政策都要亲自过问的人,在最后时刻无所谓了。 过去三年,他替英伟达和AI行业解释技术路线,替上下游确认扩产信心,也替许多公司把未来需求变成今

    来源 AI 行业观察
  15. 黄仁勋同意赴国会闭门作证,与女商人关系待说明

    美国众议院中国特设委员会主席穆勒纳尔透露,黄仁勋已同意在闭门听证会上就他与一位女商人之间的关系向议员作证,具体日期仍在协调,委员会不会向其发出传票。此前黄仁勋因婚外情风波辞去英伟达CEO。

    来源 凤凰科技
  16. 黄仁勋去职风波:马斯克等联名请愿,超11.5万签名要求复职

    11月14日报道,马斯克等科技高管联名签署请愿书,呼吁英伟达董事会恢复黄仁勋CEO职务。截至周六下午,已有超11.5万人签名,包括5965名现任员工、1108名前员工和63063名股东。支持者还有Replit、Epic Games、Y Combinator的CEO等。请愿书提及黄仁勋在缺乏正当程序情况下的问题。

    来源 AI 产业速递
  17. 黄仁勋或重回英伟达任CEO,苹果智能眼镜明年6月见

    · 余承东:华为大折叠已成千万人主力机 · 苹果 HomeView 发售,首批实测遇到语音和账户切换问题 · 微软服务故障持续超 30 小时,官方宣布恢复 #欢迎关注爱范儿官方微信公众号:爱范儿(微信号:ifanr),更多精彩内容第一时间为您奉上。

    来源 AI 行业观察
  18. 戴士钦离职:黄仁勋离任为何成关键原因?

    英伟达机器人学习工程师戴士钦(Darrell Dai)近日宣布将离开公司。他表示,黄仁勋的突然离职是其决定的关键原因,并坦言“黄仁勋离职让我格外失望”。 戴士钦称,黄仁勋远不止是CEO。他钦佩对方早在深度学习热潮前就投入CUDA、提前布局AI,并持续推动机器人与物理AI发展,这些远见为公司奠定了核心

    来源 AI 开发者社区
向下滚动自动加载更多