谷歌DeepMind发布Genie 4:音视频同步生成,最长两分钟可交互画面

资讯 AI 行业观察 作者:周小白 全文 1605 字 · 约 5 分钟读完 配图 3 张 分类Google模型发布世界模型DeepMind

【TechWeb】10月29日消息,当地时间10月27日,谷歌DeepMind推出世界模型Genie 4研究预览版。该模型可生成高拟真度可交互虚拟世界,首次实现音视频同步生成,支持自由编辑,最长维持两分钟连贯画面。 谷歌DeepMind官方账号称,“Genie 4是我们迄今为止最逼真、最具交互性的世界模型。” 一句话创

所属频道 大厂动态模型发布

当地时间10月27日,谷歌DeepMind推出世界模型Genie 4研究预览版。据TechWeb 10月29日消息,这一模型能够生成拟真度很高的可交互虚拟世界,首次做到音视频同步生成,并支持自由编辑,连贯画面最长可维持两分钟。

谷歌DeepMind官方账号给出的说法是:“Genie 4是我们迄今为止最逼真、最具交互性的世界模型。”

谷歌DeepMind发布Genie 4:音视频同步生成,最长两分钟可交互画面(配图 1)

一句提示,造出一个能交互的虚拟世界

Genie 4跟只生成视频的AI工具不一样,它产出的是一个可以实时探索的交互式虚拟环境。用户用文字提示建好场景后,能拿键盘操控角色走动、调整镜头,模拟运行中还能接着输入指令,随时改天气、换摄像机角度,或者往场景里加新人物、新物体。

谷歌研究总监特贾斯·库尔卡尼提到,接下来的方向是“混合式世界模型”:规划代码与文本的活儿交给Gemini,Genie则实时接指令,在不同抽象层级上模拟现实。

技术层面的升级落在四个维度上。原生音频生成是Genie系列头一回具备的能力:模型生成每一帧画面的同时,会同步生成对得上的环境音、背景音乐和交互式对话,角色能就场景里正在发生的事实时交谈。

物理和人物模拟这块,Genie 4在空气动力学、碰撞、环境阻力等复杂交互上的准确度有明显提升,数字人物的动作与面部表情也更自然。

实时场景导演功能让用户可以用自然语言在模拟中途“喊停改戏”。Gemini 3.8 Flash在循环中充当活跃代理,负责追踪画面帧、拆解目标、验证动作成没成功,场景一变就即时调整计划。

另外,Genie 4能对多步骤的复杂事件做连贯模拟。开发者因此可以在虚拟环境里观察AI代理怎么应对复杂场景,再把策略搬到现实中去。

落地方向:机器人训练与影视原型

谷歌把机器人训练、游戏开发、交互式学习和影视制作明确列为Genie 4的主要应用方向。

机器人方面,一项与Gemini Robotics关联的实验显示,Gemini 4 Argon模型先把任务拆成多个步骤,再交给Genie 4实时模拟。这为在物理机器人动手执行任务之前,先到虚拟环境里测试场景提供了一条可行路径。

影视制作是早期测试者关注的新方向。谷歌DeepMind工程师迭戈·里瓦斯认为,实时生成能力在创意构思和故事板阶段最能体现价值,因为它“让创作者保持流畅的创作状态”。

沃顿商学院教授伊桑·莫利克体验时只给了一句提示,一分钟内就生成了一座“由机器人和马匹居住的新哥特式粗野主义城市”,随后又实时加入了巨龙和NPC角色。

不过,谷歌在发布中反复强调,Genie 4还处在研究预览阶段,没有面向公众开放。目前只向“受信任测试者”开放,未来几周计划通过Project Genie提供给Google AI Ultra订阅用户,以及Gemini API和AI Studio的早期访问合作伙伴。

团队也承认模型有明显局限:模拟时间一长,场景细节和物体稳定性就容易漂移,音频准确性、虚拟世界内文字的可读性也都还没完全解决。

还有一点,Genie 4生成的所有视频与音频都会带上SynthID隐形水印。谷歌表示,模型经过了严格的安全评估,以防止有害内容生成。

世界模型赛道竞争升温

Genie 4发布的时间点,正赶上世界模型领域竞争与整合一起升温。

几个月前,AI视频初创公司Runway刚推出第二款世界模型GWM Worlds 2,同样主打可交互响应和音频生成。

行业整合也在提速。李飞飞创立的World Labs被AMD收购,亚马逊正洽谈收购Decart,Rivian则收购了Third Dimension,把模拟能力引入自动驾驶测试内部。

放到更大的层面看,谷歌把世界模型摆在了通往AGI的关键路径上。官方博客写道:“理解和模拟世界是构建AGI的关键一步”。

Genie 4能不能从研究预览走到可规模化的产品,要看它在真实工作流里的稳定性表现,以及开发者的采用速度。方向倒是已经清楚:AI正从生成内容,转向生成一个可供人类与机器共同训练、试错和创造的世界。

本文由本站编辑组整理与排版,内容基于公开信息核实后归纳发布,与文中提及的产品、公司无隶属关系。我们持续跟踪 AI 领域的模型、产品与行业动态,力求信息准确、表述清晰;文中涉及的名称、价格与功能细节可能随官方调整而变化,请以官方最新说明为准。如发现疏漏或表述有误,欢迎通过站内渠道反馈指正。

相关推荐 按相关度与热度排序

全部资讯 →
  1. DeepMind发布Genie 4:物理真实感与人类行为模拟升级

    DeepMind发布Genie 4世界模型,宣称在物理真实感和人类行为模拟上进一步提升,将向开发者及Google AI Ultra订阅用户开放。本文梳理世界模型从生成可交互环境到逼近真实物理的演进,分析其对游戏、机器人与AI训练的意义,并指出开放生态、算力成本与评测标准仍是关键挑战。

    来源 AI 行业观察
  2. Genie 4研究预览上线:新增实时音频,支持中途文本操控

    Google DeepMind发布Genie 4世界模型研究预览,面向可信测试者。新版本加入实时音频、更逼真的模拟,并支持在模拟过程中通过文本提示实时操控。相比前代,Genie 4从生成可交互世界进一步走向多感官、可导演的实时世界模型。本文梳理其核心升级、应用想象与仍需关注的挑战。

    来源 AI 科技快讯
  3. 谷歌Genie 4发布:实时生成世界,还能语音对话

    梦瑶 发自 凹非寺 量子位 | 公众号 QbitAI 实时、改环境、语音指令、Gemini…全来了??? 刚刚,Google DeepMind正式发布新一代「世界模型」——Genie 4。 这也是,谷歌迄今为止最逼真且最具交互性的世界模型。 一句话实时修改场景、模拟真实物理效果,连人物动作、环境音效和互动对话都能同步生

    来源 AI 开发者社区
  4. 谷歌发布Genie 4世界模型:实时生成场景,角色能开口对话

    文章转载于量子位作者:梦瑶实时、改环境、语音指令、Gemini…全来了???刚刚,Google DeepMind正式发布新一代「世界模型」——Genie 4。这也是,谷歌迄今为止最逼真且最具交互性的世界模型。一句话实时修改场景、模拟真实物理效果,连人物动作、环境音效和互动对话都能同步生成全安排上了。比如,直接在对话框里

    来源 腾讯网
  5. 谷歌DeepMind发布Genie 4:AI世界开口说话,边玩边改

    出品 | 网易智能 作者 | 小小 编辑 | 王凤枝 骑着巨龙掠过山谷,视角随你转动,耳边是振翅声和呼啸而过的风声。谷歌这次展示的AI世界,已经有了几分亲手玩游戏的感觉。 打开网易新闻 查看精彩图片 图:谷歌官方演示节选,GIF不含声音 美国当地时间10月27日,谷歌DeepMind发布新一代世界模型Genie 4的研

    来源 AI 行业观察
  6. Genie 4:实时交互加原生音频,世界模型能“进”了?

    Google DeepMind推出新一代世界模型Genie 4,主打高保真视觉与原生音频同步生成。该模型允许用户通过自然语言实时修改场景中的天气、物体或人物行为,并引入Gemini系列模型进行逻辑推理以维持模拟连贯性。目前仅面向受信任测试者开放预览,旨在探索其在机器人训练、游戏原型设计及影视预演等领域的应用潜力,同时承

    来源 AI 应用前沿
  7. 谷歌DeepMind发布Genie 4:可生成实时音频,场景能边跑边改

    谷歌DeepMind在最新研究预览中发布了第四代世界模型Genie 4,其亮点是在生成逼真交互世界的同时新增实时音频,并能通过提示词实时修改天气、摄像机角度或添加物体。Genie 4可将场景一致性维持两分钟,为上一代的两倍。谷歌强调其与Gemini模型的协同——Gemini担任'导演'负责规划与检查,Genie负责视觉

    来源 凤凰科技
  8. 谷歌Genie 4:120秒虚拟世界,AI未来已来

    这个世界只能维持 120 秒,然后一切开始崩塌。然而在这两分钟里,你可以随时改变天气、召唤巨龙,甚至让一座城市为你拔地而起。 刚刚,Google DeepMind 正式发布新一代世界模型 ....

    来源 腾讯网
  9. 谷歌Genie 4实测:30秒生成可玩世界,24帧实时改?

    如果 AI 不再只是生成一段视频,而是直接创造一个可以走进去、随时改变,甚至能与其中人物交流的世界,会发生什么? 谷歌最新发布的 Genie 4,正在把这一设想推向现实。 当地时间 10 月 27 日,Google DeepMind 正式推出新一代世界模型 Genie 4,称其为「迄今为止最逼真、交互性最强的世界模型」

    来源 AI 行业观察
  10. 张一鸣6700亿刷新首富纪录,谷歌Genie 4、苹果M6新品同日出炉

    “IT早报”时间,大家好,现在是 2026 年 10 月 28 日星期三,今天的重要科技资讯有: 1. 2026 胡润百富榜发布:张一鸣 6700 亿元刷新中国首富财富纪录、DeepSeek 梁文锋首次上榜位列第七 胡润研究院发布《2026 胡润百富榜》。今年共有 1529 位个人财富 50 亿元以上的企业家登上胡润百

    来源 AI 行业观察
  11. 谷歌Genie 4世界模型发布:实时交互模拟,还能原生生音

    当地时间10月27日,谷歌宣布推出新一代世界模型Genie 4,可实现高真实感实时交互模拟,并动态生成环境音、音乐和交互式对话。用户可通过自然语言实时调整场景、天气和角色。该模型融合Gemini系列能力,目前已向部分受信任测试者开放,未来将面向Google AI Ultra订阅用户及Gemini API、AI Stud

    来源 腾讯网
  12. 谷歌DeepMind高层换血后,Argon能打回前沿吗?

    文 | 影子备忘录 2026年的AI赛道,用“瞬息万变”来形容已经远远不够。如果你每隔两周没有关注前沿模型的动态,打开排行榜时大概率会怀疑自己是不是错过了整整一个季度。 就在这样近乎疯狂的产品迭代节奏中,谷歌DeepMind于9月30日正式发布了Gemini 4系列的首款旗舰模型Argon。距离上一代旗舰Gemini

    来源 AI 开发者社区
  13. 谷歌Genie 4:2分钟音视频同步生成,游戏业再受AI冲击

    谷歌推出新一代世界模型Genie 4,将最长模拟时长延长至2分钟,并首次实现音视频同步生成,用户还可通过自然语言实时改变虚拟环境、操控镜头和添加角色。谷歌正探索其在游戏设计、影视制作、教育和机器人训练等领域的应用。美东时间10月27日周二,谷歌宣布,Genie 4是其迄今最逼真、交互能力最强的世界模型。与主要根据提示.

    来源 腾讯网
  14. 谷歌DeepMind高管:终身学习者更受青睐,会提问比会答题更稀缺

    IT之家 10 月 25 日消息,据《商业内幕》今天报道,谷歌 DeepMind 高管莱拉 · 易卜拉欣(Lila Ibrahim)近期表示,公司越来越看重那些能够证明自己在课堂之外,持续学习的求职者。 这名高管表示,虽然学历依然重要,但公司的招聘已经更重视求职者的经历。例如一项资历能告诉面试官你学过什么,多项资历则能

    来源 AI 行业观察
  15. 谷歌发布Genie 4:一句话生成可玩世界,键盘漫游NPC开口对话

    阅读之前记得关注+星标⭐️,,每天才能第一时间接收到更新 谷歌刚刚推出Genie 4,迄今为止最逼真且最具交互性的世界模型。Genie 4 的最新功能: 照片级真实感:基于 Gemini Omni 构建,在空间和主题中呈现逼真的细节 高级物理效果:空气动力学、碰撞以及自然移动的人物 实时控制:通过提示更改场景、添加元素

    来源 腾讯网
  16. DeepMind材料AI:700种预测材料已合成,科研角色变了?

    最近刷到一条消息,截至2026年,Google DeepMind作为全球顶尖人工智能研究实验室,其开发的材料探索图网络GNoME,已有超过700种预测的新材料在全球实验室中被成功合成。 其中包含528种潜在固态电解质候选、5.2万种类石墨烯层状化合物。直接为下一代锂电池、钙钛矿太阳能电池等领域提供了海量研发方向。 我第

    来源 AI 行业观察
  17. 微软MAI-Image-2.7-Preview发布:图像编辑榜排第二,仅次OpenAI

    IT之家 10 月 28 日消息,微软昨日(10 月 27 日)发布公告,宣布推出 MAI-Image-2.7-Preview 模型。微软人工智能首席执行官穆斯塔法 · 苏莱曼(Mustafa Suleyman)自豪地宣布:“MAI-Image 现在是全球排名第二的图像编辑模型!” 苏莱曼在推文中写道,基于 Artif

    来源 AI 行业观察
  18. Nano Banana 2.1发布:谷歌升级图像模型,瞄准专业设计

    机器之心编辑部 Nano Banana 2 推出几个月之后,谷歌终于更新了这条产品线。 就在今天凌晨,Google DeepMind 正式发布 Nano Banana 2.1。 从命名看,这只是一次「0.1」级别的升级,但谷歌给出的评价相当直接:新版在此前 Nano Banana 系列基础上进一步提升,重点变化集中在视

    来源 AI 开发者社区
  19. PyTorch和JAX的Softmax实现有Bug?DeepMind新研究揭示精度陷阱

    Google DeepMind指出主流深度学习框架中的Softmax和交叉熵存在数值精度问题。当模型过于自信或进行知识蒸馏时,浮点运算误差会导致梯度计算错误,引发训练损失尖峰或模型退化。研究团队提出了无需提高精度的修复方案,并展示了Gemini在发现问题和撰写论文中的深度参与。

    来源 AI 应用前沿
  20. 谷歌DeepMind高管:终身学习者更受招聘青睐,会提问比会答题更难

    IT之家 10 月 25 日消息,据《商业内幕》今天报道,谷歌 DeepMind 高管莱拉 · 易卜拉欣(Lila Ibrahim)近期表示,公司越来越看重那些能够证明自己在课堂之外,持续学习的求职者。这名高管表示,虽然学历依然重要,但公司的招聘已经更重视求职者的经历。例如一项资历能告诉面试官你学过什么,多项资历则能说

    来源 腾讯网
  21. 谷歌DeepMind推SynthID Bio:给AI蛋白质加上水印

    谷歌今日推出 SynthID Bio,将数字水印技术引入合成生物学领域。该技术可将不可感知的签名直接嵌入生物编码,不仅能在数字模型上验证,还可在合成的物理蛋白质上完成验证,同时在实验室测试中保持蛋白质的生物学功能。 生成式 AI 正在帮助科学家解决关键生物学挑战,从预测蛋白质结构到设计全新蛋白质,再到开发新型噬菌体。但

    来源 AI 开发者社区
向下滚动自动加载更多