梅涛提出智能体化世界模型:LLM、全模态与具身如何合流

资讯 量子位 全文 1784 字 · 约 5 分钟读完 配图 1 张 分类世界模型智能体

走向“智能体化世界模型”。

所属频道 模型发布智能体与 Agent

智能体化世界模型,是梅涛给出的方向。

程浅 发自 凹非寺 量子位 | 公众号QbitAI

2026 世界顶尖科学家论坛第二届国际工程智能大会近日召开。这场年度盛会汇集了全球顶尖科学家、院士与产业领军者,围绕“工程智能”这一核心议题,讨论智能时代的前沿走向。

智象元一(HiDream.ai)创始人兼 CEO、加拿大工程院外籍院士梅涛在会上发表演讲,提出要构建智能体化的全模态世界模型(Agentic Omnimodal World Models),以此迈向下一代世界智能。

梅涛提出智能体化世界模型:LLM、全模态与具身如何合流(配图 1)

全球大模型调用规模正在爆发。AI模型聚合平台OpenRouter的数据显示,截至今年10月,中国周Token调用量达到93万亿,是美国的4.16倍,并且连续26周排在全球第一。这些数字说明,AI正从“工具”迅速变成像水、像电一样的新型社会基础设施。

模型迭代也在提速。2023 年时,大模型基本以 12 个月为周期迭代;递归自我改进(RSI)把 AI 推上自我加速的轨道之后,迭代已经按周来计算。

AI 能力越强,短板也越明显。数字智能(Digital AI)这边,从文本交互、代码编写到视频生成,再到数学研究,AI 已经达到甚至超过人类专家水平。数学研究就是一个例子:OpenAI 最近一次性公开 377 项数学成果,覆盖数百个长期悬而未决的开放问题。

物理智能(Physical AI)的进展则慢得多。物理理解薄弱、交互数据匮乏、闭环执行能力不足,这些都卡着它的脚步。

Digital AI 与 Physical AI 之间横着一道鸿沟,下一代人工智能必须回答怎么跨过去。世界模型,就是那座桥。

世界模型要做的事,是让 AI 弄懂世界怎么运行,并推演未来可能发生什么。它统一理解和生成全模态信息,对世界状态、物理规律和因果关系建模,进而感知、推演和预测真实世界。

通往世界模型的技术路径不止一条,这里也成了 AI 竞争的下一个焦点。产业界目前有大语言、多模态和具身大模型三条演进路线。在梅涛看来,这三条路线并不孤立,长远看会汇流到一起,走向智能体化世界模型(Agentic Omnimodal World Models)。

智能体化世界模型由三个部分组成:

其一是 LLM,充当智能体的决策大脑,管的是理解意图、生成推理和制定任务规划。

其二是 Omni-Model,即通用世界模型,扮演世界模拟器:按照 LLM 的意图模拟物理世界如何运行,推演行动会带来什么后果,并预判下一步动作。

其三是 Embodied Context,即具身上下文。它对接真实物理环境,执行具身行动,同时把真实观测数据传回来,用来校准世界模型。

三者配合起来,就是「One Token Space, One World」——思维世界与物理世界在同一个Token空间里统一。通往下一代世界智能的关键,正在这里。

对世界模型的这些思考,已经内化为智象的产品哲学和技术基因。智象自研原生全模态(Unified Transformer)模型架构,把文本、图像、视频、空间、位姿、力触、传感器等所有模态统一表征。在 UiT 底座之上,智象搭起了完整的世界模型矩阵:从图像模型起步,延伸到视频模型、交互模型 HiDream-O1-World,再到具身模型 HiDream-O1-Embodied,能力从静态图像、动态视频一路演进到空间交互和具身行动。

商业化上,智象形成了“1+1+3”架构:底层是原生全模态世界模型矩阵;中间是企业级模型平台HiHarness,汇聚自研 HiDream-O1 全模态系列模型及全球顶尖模型;最上层是三个智能体——AIGC 的商业营销智能体HiBurst、影视创作智能体“帧赞”和内容创作智能体vivago。

智象同时在前沿领域推进世界模型的落地。具身智能方面,世界模型能规模化合成毫米级高精度动作视频,绕开真机数据成本高、规模小的瓶颈,为真机训练供给数据;生命科学方面,智象与合作企业用多尺度生物影像的统一表征来理解和预测细胞演化,为药物响应评估提供前置参考,在实验前筛出更值得验证的方案。

本文由本站编辑组整理与排版,内容基于公开信息核实后归纳发布,与文中提及的产品、公司无隶属关系。我们持续跟踪 AI 领域的模型、产品与行业动态,力求信息准确、表述清晰;文中涉及的名称、价格与功能细节可能随官方调整而变化,请以官方最新说明为准。如发现疏漏或表述有误,欢迎通过站内渠道反馈指正。

相关推荐 按相关度与热度排序

全部资讯 →
  1. Ripple-65B Preview发布:65B稠密模型智能体编程超越更大规模对手

    IT之家 11 月 6 日消息,由前谷歌研究员创立的人工智能实验室 Ricursive Intelligence 当地时间本月 4 日发布了 Ripple-65B Preview,宣称其在美国开放权重模型中拥有最为出色的智能体编程表现。 Ricursive Intelligence 此前的工作专注于 AI 驱动的芯片设

    来源 AI 行业观察
  2. Karpo做城市生活AI:从心情出发,帮用户把念头变成安排

    谁能更早承接用户尚未明确的需求,谁就更有机会成为新的消费入口。 一笔消费,究竟从什么时候开始?很多人会觉得,是下单付款的那一刻。但只要回想一次最近的外出,就会发现它的起点其实早得多。 订下一家餐厅之前,可能经历过想见朋友、想庆祝、想换个环境等不同念头;同样一句今晚想出去,最终可能对应一顿饭、一场演出,...

    来源 腾讯网
  3. Perplexity上线Teammate:一个能长期盯复杂项目的智能体

    IT之家 11 月 6 日消息,人工智能企业 Perplexity 当地时间本月 4 日宣布推出一项名为 "Teammate" 的功能。作为使用者的“团队成员”,Teammate 是一款能执行持续性复杂工作的智能体,简化了使用 Perplexity Computer 时的规划工作。 Perplexity Teammat

    来源 AI 行业观察
  4. 曙光云OneBox发布:国产全栈智能体平台瞄准政企市场

    国产全栈可信,从“对话回答”走向“可信执行”OneBox是面向政企组织的私有化智能体平台,员工通过桌面入口,即可调用模型、知识和工具完成任务;单位则可统一管理使用范围和操作权限,使AI应用与现有管理要求相适应。它形成“国产芯片+曙光云+霄练模型服务+OneBox智能体”的完整技术链,从算力底座到上层应用均可私有化交付。

    来源 TechWeb
  5. 曙光云发布OneBox智能体协作平台:主打政企私有化部署

    国产全栈可信,从“对话回答”走向“可信执行”OneBox是面向政企组织的私有化智能体平台,员工通过桌面入口,即可调用模型、知识和工具完成任务;单位则可统一管理使用范围和操作权限,使AI应用与现有管理要求相适应。它形成“国产芯片+曙光云+霄练模型服务+OneBox智能体”的完整技术链,从算力底座到上层应用均可私有化交付。

    来源 TechWeb
  6. Meta收购Conductor:AI编程智能体赛道再落一子

    IT之家 11 月 5 日消息,Meta 已收购 AI 编程初创公司 Conductor。该公司开发了一款 AI 编程工具,允许用户通过在多个并行工作空间中部署 AI 智能体,同时启动和推进多个软件项目。 Conductor 创始人兼首席执行官查理 · 霍尔茨(Charlie Holtz)周三发文称:“有一个重大消息要

    来源 AI 行业观察
  7. Claude Code产品负责人Cat Wu转投OpenAI,Anthropic上市前夕连失核心

    人、基建落位,OpenAI 押注团队 Agent。 作者丨高允毅 编辑丨岑 峰 Anthropic 刚递交招股书一周,自家最赚钱的产品,产品负责人已经坐到了对面。 今早,前 Claude Code 产品负责人 Cat Wu 在 X 上宣布加入 OpenAI,出任核心产品组的产品负责人。一天前,她刚告别了 Anthrop

    来源 AI 行业观察
  8. Uber 高管:目前几乎没人使用 AI 智能体叫车

    Uber 第三季度财报显示,10 月订单量最高的一周,AI 智能体贡献的网约车订单仅 4 笔,外卖订单 500 笔,远低于 3.2 亿的总订单量。高管称目前用户通过 AI 智能体下单的意愿极低,不过仍看好未来增长潜力。#AI前沿#

    来源 IT之家
  9. Meta收购Conductor:AI编程初创团队并入超级智能实验室

    IT之家 11 月 5 日消息,Meta 已收购 AI 编程初创公司 Conductor。该公司开发了一款 AI 编程工具,允许用户通过在多个并行工作空间中部署 AI 智能体,同时启动和推进多个软件项目。Conductor 创始人兼首席执行官查理 · 霍尔茨(Charlie Holtz)周三发文称:“有一个重大消息要告

    来源 腾讯网
  10. Uber高管:万圣节周AI智能体叫车仅4笔

    IT之家 11 月 5 日消息,目前使用个人 AI 智能体预约 Uber 出行的用户寥寥无几。在当地时间周三举行的第三季度财报电话会议上,Uber 表示,10 月份订单量最高的一周,也就是万圣节所在的一周,通过 AI 智能体下单的网约车订单仅有 4 笔。通过 Uber 旗下外卖平台 Uber Eats 使用 AI 智能

    来源 腾讯网
  11. Uber高管:AI智能体叫车几乎无人用,万圣节周仅4单

    IT之家 11 月 5 日消息,目前使用个人 AI 智能体预约 Uber 出行的用户寥寥无几。在当地时间周三举行的第三季度财报电话会议上,Uber 表示,10 月份订单量最高的一周,也就是万圣节所在的一周,通过 AI 智能体下单的网约车订单仅有 4 笔。 通过 Uber 旗下外卖平台 Uber Eats 使用 AI 智

    来源 AI 行业观察
  12. 月之暗面Kimi Hosted Agents:7×24小时托管Agent运行框架

    36氪获悉,月之暗面宣布发布 Kimi Hosted Agents(托管智能体),将支撑 Agent 运行的 Harness 作为云端服务提供给企业和开发者,企业无需自行搭建和维护运行框架,即可获得 7×24 小时的托管环境,支持长程任务执行与多智能体高效协作。

    来源 AI 行业观察
  13. Harness框架怎么演进:从链、图到代码化

    基于大模型的智能体系统,已经从线性提示词发展到基于图的工作流,近期又演进为可执行代码的 Harness。本文建议对模型输出做校验,并选用能够满足可靠性、速度和成本需求的最简单的方案。

    来源 InfoQ
  14. 李飞飞 World Labs 团队发布“游戏掌机”Frameboy:用网页实时探索 AI 生成世界,每秒最高 15 帧

    IT之家 11 月 6 日消息,“AI 教母”李飞飞的创企 World Labs 于今年 9 月发布了“全球首个多模态世界模型”—— Atlas,宣称该模型能够以像素级精确的相机控制生成图像和视频帧,并将其在 3D 中重建。 时隔两个月,World Labs 端出了一款名为 Frameboy 的演示项目,可以让网友直接

    来源 AI 行业观察
向下滚动自动加载更多