谷歌发布Genie 4世界模型:原生声音、2分钟记忆,内测已开

资讯 AI 行业观察 作者:新智元 全文 4035 字 · 约 11 分钟读完 配图 16 张 分类Google模型发布数据泄露世界模型DeepMind

谷歌版「黑客帝国」,今夜彻底成真了! 就在刚刚,Google DeepMind甩出深夜王炸,正式发布新一代通用世界模型Genie 4。 这是谷歌迄今为止最逼真、最具互动性的AI世界模型。 一句提示词,就能直接造出一座能张嘴接戏、实时改命的「活体宇宙」! 谷歌CEO劈柴第一时间宣布:从「生成一段视频」到「实时运行一个世界

所属频道 大厂动态模型发布政策与风险

谷歌版「黑客帝国」成真了。就在刚刚,Google DeepMind 在深夜发布新一代通用世界模型 Genie 4,称这是谷歌迄今最逼真、最具互动性的 AI 世界模型。

一句提示词,就能造出一座能张嘴接戏、实时改命的「活体宇宙」。谷歌 CEO 劈柴第一时间放话:从「生成一段视频」到「实时运行一个世界」,言出法随的「绿洲」时代来了。

谷歌发布Genie 4世界模型:原生声音、2分钟记忆,内测已开(配图 1)

划重点,Genie 4 把世界模型带进了「有声、有人、有大脑」的新阶段。

谷歌发布Genie 4世界模型:原生声音、2分钟记忆,内测已开(配图 2)

Genie 系列这次头一回原生生成声音与即兴对话:环境音和配乐同步产出,角色还能照着突发状况张嘴即兴交谈。

连贯长记忆做到 2 分钟,交互 24 帧丝滑。单次连贯世界维持时间翻倍至约 2 分钟,实机画面稳定在约 24 帧/秒。

逼真人类与刚体物理被重塑。Gemini Omni 负责锚定现实常识,人物微表情、镜面反射和物理碰撞都全面跃升。

三大 Gemini 联手,组成「混合世界模型」:Gemini 3.8 Flash 在后台盯着画面当「导演」,Gemini 4 Argon 则拆解 22 步精细动作,指挥机器人下跳棋。

你往前走一步,世界就实时长出一寸;你改一句话,物理法则和 NPC 台词当场跟着重写。

视频模型还在比几秒钟的镜头美感时,谷歌已经为未来的通用 Agent 与机器人造出了可以无限试错的平行宇宙。

目前谷歌已开始内测 Genie 4,Google AI Ultra 用户可以去申请 waiting list。

只要一句话,为你当场「生成一个宇宙」

为展示 Genie 4 的统治力,谷歌放出一系列极具震撼力的 Demo,风格跨越之大、细节之变态,让人叹为观止。而且在 Genie 4 面前,你不再是观众,你是「第一人称游戏玩家」,是这个世界的「上帝」。

下面这段王家卫风满满的香港大桥飙车戏,你敢信根本不是原片?后座的女孩刚喊出台词,玩家敲进两行字:「背景发生爆炸」「毁灭世界的巨型外星触手」。

紧接着,远处的维港天际线立马火光冲天,外星触手直接从天砸落。

谷歌发布Genie 4世界模型:原生声音、2分钟记忆,内测已开(配图 3)

连路灯的橘色拖影、女主的皮肤质感和细微的担忧表情,都在长镜头中被完美渲染。

去年的 Genie 3 虽然开创了实时交互视频的先河,却有一个致命短板——没有声音,生成真人时也漏洞百出。谷歌直接放出了一段 Genie 3 与 Genie 4 的同屏对比。

谷歌发布Genie 4世界模型:原生声音、2分钟记忆,内测已开(配图 4)

左边 Genie 3 仍是五官糊在一起、四肢发僵、没有声音的纸片人;到了 Genie 4,靠着 Gemini Omni 对现实常识的锚定,化妆镜前的暖光、演员细微的表情,连镜面上的实时倒影都能拍出来,细得像实拍的长镜头。

拿到抢先测试资格的沃顿商学院教授 Ethan Mollick,晒出第一手实测录屏。

谷歌发布Genie 4世界模型:原生声音、2分钟记忆,内测已开(配图 5)

他只给了一句提示词「由马和机器人共同居住的新哥特式粗野主义城市」,不到1分钟,这座城就立了起来。

单帧延迟稳稳落在23.4至25.3 FPS之间。随手按下「巨龙掠空」,几秒之内一头巨龙扇着双翼呼啸而过。

谷歌发布Genie 4世界模型:原生声音、2分钟记忆,内测已开(配图 6)

觉得不过瘾,他又敲入「一只友好的水獭NPC走过来问问题」。街角真就跑出一只穿马甲的水獭,一口伦敦腔:「打扰一下,旅行者。」

紧接着他放出一段更神的实测:在Genie 4里跑《毁灭战士(DOOM)》。

谷歌发布Genie 4世界模型:原生声音、2分钟记忆,内测已开(配图 7)

设定是「走进一间每台电脑和墙壁都在跑DOOM的办公室」,随后他连下三道指令:「恶魔同事出现」「手里拎着加特林机枪」「给我发了一笔奖金」。

话刚落地,一位恶魔同事真走了出来,双手转着重型加特林,奖金当场就发了下来。

a16z 合伙人Justine Moore也贴出水下潜行实测,称这是巨大的飞跃。

谷歌发布Genie 4世界模型:原生声音、2分钟记忆,内测已开(配图 8)

在海底洞穴里点下「受诅咒的紫钻发光」和「电鳗群袭来」,洞穴深处立刻紫光爆闪,巨大的电鳗群涌了出来。

谷歌发布Genie 4世界模型:原生声音、2分钟记忆,内测已开(配图 9)

再点「幽灵海盗现身」,海盗船长的亡灵立马冒了出来,逼真得吓人。

谷歌发布Genie 4世界模型:原生声音、2分钟记忆,内测已开(配图 10)

前谷歌AR/3D产品经理Bilawal Sidhu则把Genie 4当成了科幻片的实时虚拟片场。

谷歌发布Genie 4世界模型:原生声音、2分钟记忆,内测已开(配图 11)

他召来UFO,打出一句「它把我吸了进去」——UFO瞬间轰开牵引光束,摆出要把人吸走的架势。

谷歌发布Genie 4世界模型:原生声音、2分钟记忆,内测已开(配图 12)

四大关键功能

按谷歌官博的说法,Genie 4这次提升了四大关键功能。

实时塑造世界模拟

模拟场景可以用自然语言实时改动,比如变天气、移镜头,或者加进新的人物、物体,Gemini会依据周围场景来调整指令。输入指令的空隙里,Gemini还会盯着场景、引导走向,让整个世界顺畅地发展下去。

照这么看,盗梦空间算是成真了?一个男人在岛上吹萨克斯,敲下「鲸尾出现」,他身后的水里当即冒出鲸鱼。

接着我们让这个世界下雪,鹅毛大雪马上飘了下来。

谷歌发布Genie 4世界模型:原生声音、2分钟记忆,内测已开(配图 13)

换成第一人称视角,实时改写世界带来的冲击感还会更强。

画面里我们以140公里的时速骑着巨龙俯冲,掠过古堡;这时下令「城堡发射火球」,塔楼当场喷出烈焰,火球擦身而过,刺激感直接拉满。

谷歌发布Genie 4世界模型:原生声音、2分钟记忆,内测已开(配图 14)

另一个场景里,Genie 4先依用户提示生成南极冰封大地,再生成第一人称视角的乘热气球画面。

谷歌发布Genie 4世界模型:原生声音、2分钟记忆,内测已开(配图 15)

拓展物理学和人类行为的现实边界

Genie 4这回给交互模拟立了一套新的真实感标准。

Genie 4 对真实世界物理场景的模拟相当逼真,空气动力学、碰撞这类效果都拿捏得住,底子在于它对世界物理有很强的理解。

它这回最显眼的进步落在人物上:能造出自然走动、会对环境作出反应、还能实时交互操控的角色。

给一句 prompt,80年代的日本乡村车站里,乘务员就会喊出车提示。

再补一个提示,一位提着行李箱的老妇人立刻现身。

接下来的画面,让人直呼 Genie 4 的物理交互太真了。

户外庭院的台子上,大理石半身像被推向西瓜。

一声闷响,瓜瓤和汁水四散飞溅。从重力冲击到碎片轨迹,Genie 4 在实时交互里都还原得恰如其分。

柔体力学和空气动力学,它照样不在话下。

草甸上铺着粉色丝绸,风一起,丝绸立刻翻涌出层层丝滑的波浪,观感很真实。

镜头转向地面,一只枫树种子落下的特写,同样逼真。

画面推到毫厘之间的微距视角,枫树翅果像直升机螺旋桨那样自旋着滑落,最后轻轻停在草叶间。

告别「无声蜡像馆」,Genie 4能模拟声音了!

这是谷歌第一款原生生成音频的实时世界模型。

每个世界都带着自己环境的声音,树叶沙沙作响、海浪拍打沙滩,各有各的动静。

不过真正的难关还是人类语言。Genie 4 加进了实时互动对话功能,角色会根据你的输入或发生的事件开口对话、当场反应。

在这个半透明的3D彩绘玻璃世界里,用提示词召唤出一只鹿,最抓人的是它的脚步声自动变成了清脆的琉璃碰撞声。

硬核架构拆解:三大Gemini轮番上阵,搭起「混合世界模型」回路

只把 Genie 4 看成一个画质更好、还能出声的「大号视频生成器」,就小看 Google DeepMind 的野心了。

以前的实时世界模型玩几十秒就容易崩,问题出在纯像素预测没有长程逻辑规划,常常做完第一步就把后面的目标忘光了。

为了治这个老毛病,谷歌这次拿出了足够颠覆的「混合世界模型」架构,让三款 Gemini 模型和 Genie 4 组队配合。

世界模拟由此多出一个推理层面,Genis 4 能模拟复杂的多步骤事件,也能在把 AI 引入现实世界之前,测试它们在不同环境里如何运行。

第一重配合,是让 Gemini 3.8 Flash 在循环回路里当实时控场的「总导演」。

Genie 4 在前面逐帧生成画面时,Gemini 3.8 Flash 在后台盯着画面拆解多步推理序列,一边核对当前步骤有没有完成,一边发出下一步指令。

用户一旦干预,Gemini 会马上调整,生成的世界具备可靠因果、程序员行为和多步骤推理。

看下面这场近景魔术。玩家关上箱门、挥动魔术棒,右上角的Gemini 3.8 Flash便确认这一步完成,再指挥Genie 4把孔雀变成橘猫,接着又变成一台复古收音机。哪怕演到半途突然改戏,这位「总导演」也能立刻重排剧本。

冰天雪地里让一颗流星划过,再让灰冠鹤走到电子琴前啄出旋律,末了再让它一飞冲天——这样的场面同样能接得住。

Gemini 3.8 Flash管的是「世界如何按逻辑演进」;Gemini 4 Argon和Gemini Robotics加进来之后,具身智能与机器人训练的那层天花板也被捅破了。人类只说一句「跟对面的男孩下跳棋,走一步红棋」,左侧的Gemini 4 Argon立刻把任务拆成22步毫米级动作剧本。

这些高密度指令实时注入Genie 4的生成流,右侧的Apollo机器人便捏棋、走子、对弈,一整套动作行云流水。Genie 4还能进实验室做精密科研。

工业级的UR5六轴机械臂,在Genie 4里也能精准夹住移液管,插进微孔板滴注液体。中途把目标挪走,模型会实时重算策略,按新位置完成抓取。

通往ASI的必经之路,是先造出一个世界

什么才算真正的「世界模型」?你推开一扇门,转身离开30秒,再走回来,那扇门还开着。

能记住物理规律,能维持空间记忆——视频模型与世界模型的分水岭就在这里。

现在Google Genie 4做到了。「海量无标签视频预训练+少量动作轨迹微调」,再叠加Gemini的符号逻辑与长程记忆,单次连贯世界的维持时间被推到约2分钟。

构建交互环境,从此不用再折腾繁琐的手工3D建模。

Genie 4已向Google AI Ultra用户开放,还将作为史上首款进入Gemini API与Google AI Studio的世界模型,向开发者敞开大门。

谷歌的野心不难读出:真正的AGI,绝不可能只活在对话框里。当AI学会在自己创造的平行宇宙里穷尽万千种物理可能,它真正推开现实世界大门的那一天,也就不再遥远了。

参考资料:

https://deepmind.google/blog/genie-4-a-new-generation-of-world-simulation/

本文由本站编辑组整理与排版,内容基于公开信息核实后归纳发布,与文中提及的产品、公司无隶属关系。我们持续跟踪 AI 领域的模型、产品与行业动态,力求信息准确、表述清晰;文中涉及的名称、价格与功能细节可能随官方调整而变化,请以官方最新说明为准。如发现疏漏或表述有误,欢迎通过站内渠道反馈指正。

相关推荐 按相关度与热度排序

全部资讯 →
  1. 谷歌发布Genie 4世界模型:实时生成场景,角色能开口对话

    文章转载于量子位作者:梦瑶实时、改环境、语音指令、Gemini…全来了???刚刚,Google DeepMind正式发布新一代「世界模型」——Genie 4。这也是,谷歌迄今为止最逼真且最具交互性的世界模型。一句话实时修改场景、模拟真实物理效果,连人物动作、环境音效和互动对话都能同步生成全安排上了。比如,直接在对话框里

    来源 腾讯网
  2. 谷歌Genie 4世界模型:加音频、支持实时操控,研究预览开放

    Google DeepMind发布Genie 4世界模型研究预览,面向可信测试者。新版本加入实时音频、更逼真的模拟,并支持在模拟过程中通过文本提示实时操控。相比前代,Genie 4从生成可交互世界进一步走向多感官、可导演的实时世界模型。本文梳理其核心升级、应用想象与仍需关注的挑战。

    来源 AI 行业观察
  3. Genie 4:实时交互加原生音频,世界模型能“进”了?

    Google DeepMind推出新一代世界模型Genie 4,主打高保真视觉与原生音频同步生成。该模型允许用户通过自然语言实时修改场景中的天气、物体或人物行为,并引入Gemini系列模型进行逻辑推理以维持模拟连贯性。目前仅面向受信任测试者开放预览,旨在探索其在机器人训练、游戏原型设计及影视预演等领域的应用潜力,同时承

    来源 AI 应用前沿
  4. 谷歌推出最强世界模型 Genie 4:一句话创造可交互虚拟世界,首次实现音视频同步生成

    IT之家 10 月 28 日消息,谷歌 DeepMind 于周二推出了最新的世界模型 Genie 4,目前处于研究预览阶段。这款最新模型能够生成迄今为止拟真度最高、可交互的虚拟世界,用户可以在模拟运行的过程中输入提示词来修改场景。该模型还能生成和虚拟世界同步的实时音频,涵盖音乐、环境音以及可交互对话。 IT之家注意到,

    来源 AI 行业观察
  5. 谷歌Genie 4实测:30秒生成可玩世界,24帧实时改?

    如果 AI 不再只是生成一段视频,而是直接创造一个可以走进去、随时改变,甚至能与其中人物交流的世界,会发生什么? 谷歌最新发布的 Genie 4,正在把这一设想推向现实。 当地时间 10 月 27 日,Google DeepMind 正式推出新一代世界模型 Genie 4,称其为「迄今为止最逼真、交互性最强的世界模型」

    来源 AI 行业观察
  6. 谷歌DeepMind发布Genie 4:AI世界开口说话,边玩边改

    出品 | 网易智能 作者 | 小小 编辑 | 王凤枝 骑着巨龙掠过山谷,视角随你转动,耳边是振翅声和呼啸而过的风声。谷歌这次展示的AI世界,已经有了几分亲手玩游戏的感觉。 打开网易新闻 查看精彩图片 图:谷歌官方演示节选,GIF不含声音 美国当地时间10月27日,谷歌DeepMind发布新一代世界模型Genie 4的研

    来源 AI 行业观察
  7. 谷歌DeepMind发布Genie 4:可生成实时音频,场景能边跑边改

    谷歌DeepMind在最新研究预览中发布了第四代世界模型Genie 4,其亮点是在生成逼真交互世界的同时新增实时音频,并能通过提示词实时修改天气、摄像机角度或添加物体。Genie 4可将场景一致性维持两分钟,为上一代的两倍。谷歌强调其与Gemini模型的协同——Gemini担任'导演'负责规划与检查,Genie负责视觉

    来源 凤凰科技
  8. Genie 4研究预览版发布:实时交互世界模型瞄准机器人训练

    一年前,谷歌发布了“可实时交互的世界模型”Genie 3。一年后,号称“迄今为止最逼真、最具互动性的世界模型”的Genie 4来了。Genie从来不满足于“生成一段以假乱真的视频”,它的目标是在你眼前实时运行一个能听、能说、能改的虚拟世界。需要注意的是,这次发布依旧是“研究预览版”,目前只对受邀测试者开放,后续会先向U

    来源 腾讯网
  9. 谷歌发布Genie 4世界模型:原生音频加持,实时可玩3D世界

    物理AI 正成为科技公司的重要技术方向。北京时间10月28日,谷歌发布新一代世界模型Genie 4。与单纯追求视频生成不同,Genie 4的定位是“可实时操控、可听、可推理的动态模拟世界”。它原生支持音频生成,能根据场景实时输出环境音、音乐乃至角色对话。而作为又一款重磅模型,此次发布的时间点,正值谷歌AI投资叙事最受审

    来源 腾讯网
  10. 谷歌发布Genie 4:一句话生成可玩世界,键盘漫游NPC开口对话

    阅读之前记得关注+星标⭐️,,每天才能第一时间接收到更新 谷歌刚刚推出Genie 4,迄今为止最逼真且最具交互性的世界模型。Genie 4 的最新功能: 照片级真实感:基于 Gemini Omni 构建,在空间和主题中呈现逼真的细节 高级物理效果:空气动力学、碰撞以及自然移动的人物 实时控制:通过提示更改场景、添加元素

    来源 腾讯网
  11. 哈萨比斯警告AI安全:不加强防护,一两年内恐出大事

    IT之家 10 月 17 日消息,据路透社报道,谷歌 DeepMind 联合创始人兼董事长德米斯 · 哈萨比斯(Demis Hassabis)于本周三表示,近期由 AI 智能体发起的网络攻击事件是“前哨预警”;如果各方不进一步提升系统安全性,全球可能很快会面临严重的网络安全事件。 兼任谷歌母公司 Alphabet 首席

    来源 AI 行业观察
  12. Nano Banana 2.1发布:谷歌升级图像模型,瞄准专业设计

    机器之心编辑部 Nano Banana 2 推出几个月之后,谷歌终于更新了这条产品线。 就在今天凌晨,Google DeepMind 正式发布 Nano Banana 2.1。 从命名看,这只是一次「0.1」级别的升级,但谷歌给出的评价相当直接:新版在此前 Nano Banana 系列基础上进一步提升,重点变化集中在视

    来源 AI 开发者社区
  13. Gemini揪出Softmax交叉熵底层Bug:PyTorch、JAX和教科书全中招

    各大AI框架都错了! PyTorch错了,JAX错了。连教科书里的标准公式,也错了。 谷歌DeepMind的主任研究科学家 Jon Barron披露了这一重磅炸弹! 本周,Google DeepMind 展示了一个问题:在 PyTorch、JAX 以及各类教科书中,该算法的每一个标准版本都一直在悄悄把某个数字舍入为零。

    来源 AI 行业观察
  14. 谷歌DeepMind高层换血后,Argon能打回前沿吗?

    文 | 影子备忘录 2026年的AI赛道,用“瞬息万变”来形容已经远远不够。如果你每隔两周没有关注前沿模型的动态,打开排行榜时大概率会怀疑自己是不是错过了整整一个季度。 就在这样近乎疯狂的产品迭代节奏中,谷歌DeepMind于9月30日正式发布了Gemini 4系列的首款旗舰模型Argon。距离上一代旗舰Gemini

    来源 AI 开发者社区
  15. 哈萨比斯警告AI智能体攻击:明年或成重大安全事件

    “今年我们看到了由AI智能体发起的黑客攻击事件,这些是早期预警信号。”当地时间10月14日,在一场人工智能峰会上,DeepMind董事长兼谷歌首席科学家德米斯·哈萨比斯(Demis Hassabis)警告称,如果企业、政府等方面不强化AI系统安全防护,明年或未来几年有可能演变成重大安全事件。微软公司总裁布拉德·史密斯(

    来源 腾讯网
  16. 哈萨比斯警告:AI 安全投入不足,恐引发严重网安事故

    IT之家 10 月 17 日消息,据路透社报道,谷歌 DeepMind 联合创始人兼董事长德米斯 · 哈萨比斯(Demis Hassabis)于本周三表示,近期由 AI 智能体发起的网络攻击事件是“前哨预警”;如果各方不进一步提升系统安全性,全球可能很快会面临严重的网络安全事件。兼任谷歌母公司 Alphabet 首席科

    来源 腾讯网
  17. Ndoc上线:前Meta总监打造AI办公平台,对标Office与Workspace

    前Meta AI总监Rohit Patel近日正式推出人工智能生产力创业公司 Ndoc ,并发布旨在挑战 微软 Office与 谷歌 Workspace的同名一体化办公平台。 该平台跳出了在传统电子表格中简单嵌入聊天机器人的既有模式,从零构建了包含“阶段”、“叙事”和“模型”三个独立标签页的工作空间。用户可通过“模型”

    来源 AI 开发者社区
向下滚动自动加载更多