Google发布Genie 4:能听会说,还能实时改天气

资讯 AI 应用前沿 全文 2719 字 · 约 7 分钟读完 配图 2 张 分类Google模型发布世界模型DeepMind

Google DeepMind推出Genie 4,这是一个支持原生音频生成和自然语言控制的世界模型。用户不仅能看到画面,还能听到风声和对话,并实时改变天气或加入角色。目前仅面向少数测试者开放,存在视觉漂移等限制,并非全面商用产品。

所属频道 大厂动态模型发布

不只是看视频,而是走进一个会呼吸的世界

生成式AI的终点难道只是吐出一段几十秒的视频?Genie 4或许会让人重新想这个问题。2026年10月27日,Google DeepMind正式发布Genie 4。以往那些视频模型“生成即定格”,Genie 4不一样,它搭出来的是一个能实时探索、能动态修改、还自带声音的环境。

说白了,观众不再只是被动看一段预渲染好的像素流。人可以走进去,风吹树叶有沙沙声,角色会按指令开口说话,探索途中突然来一句“把晴天改成暴雨”,世界也会跟着变。它更像一个简化版、由AI驱动的虚拟沙盒,跟传统视频生成工具不是一回事。

不过先别急着兴奋。Genie 4眼下还在研究预览阶段,普通用户上不了手。它更像一场技术演示,亮出的是世界模型(World Model)在视听同步和长时一致性上的最新进展。

从Genie 3到Genie 4:增加了耳朵和嘴巴

想看明白Genie 4的突破,得先回头看它的前辈。2025年8月发布的Genie 3已经能按文本生成可导航的3D环境,当时给出的规格是每秒24帧、720p分辨率,画面一致性可维持数分钟。那一步已经不小,但它主要停留在“看”上。

在此基础上,Genie 4做了三件关键的事:

第一,原生音频生成。这是Google DeepMind首个能实时生成音频的世界模型。过去看AI生成的视频,配音配乐往往得后期补上。如今风声、海浪声、背景音乐,乃至角色的对白,都跟着画面同步生成。声音不再是画面的附庸,而成了环境的一部分。画面里下雨,听到的雨声就和雨滴落下的节奏对得上;角色转头说话,声音的方向感也随之变化。

第二,自然语言实时控制。用户可以像导演一样,用自然语言干预场景。比如“让镜头拉近一点”、“加入一个穿红衣服的人”或者“把时间调到黄昏”。Gemini大模型在这里充当“理解者”,解析指令,结合当前场景状态,引导Genie 4生成接下来的画面和声音。官方把这种交互称为创意预演的“草稿模式”,适合快速验证想法,而不是直接出成片。

第三,更真实的物理与动作。官方演示里展示了空气动力学效果和更自然的人物移动。角色不再是僵硬的纸片人,能对环境做出反应,比如避开障碍物,或者回应提问。当然,这不代表它能完美模拟现实物理引擎的所有细节,但视觉观感上,连贯性确实提升明显。

Gemini作为“大脑”,Genie 4作为“身体”

Genie 4的一个核心架构变化,是跟Gemini深度协同。在这套系统里,Gemini不只是聊天机器人,它扮演的是Agent(智能体)的角色。

用户提出一个复杂任务,比如“模拟一场街头采访”,Gemini会把目标拆成多个步骤:先造街道背景,再安排采访者和受访者,接着生成对话内容,最后依据对话调整人物表情和动作。Genie 4负责执行这些步骤,持续生成像素级的模拟结果。

Google还展示了结合Gemini Robotics的实验。这离真正的机器人控制尚有距离,但思路很清晰:在高保真模拟环境中训练Agent,让它们学会处理多步任务和突发状况,未来可能迁移到现实世界的机器人控制中。这种“混合世界模型”的思路,被认为是连接数字模拟与物理现实的重要桥梁。

谁能用到?别被“订阅”误导

新闻标题一出,不少读者的第一反应是:“我买了Google AI Ultra订阅,是不是就能玩了?”

答案是:不一定。

截至2026年10月28日,Genie 4只面向受信任的测试者开放。Google DeepMind在公告中提到的后续开放计划,包括Project Genie中的Google AI Ultra订阅者、Gemini API早期合作伙伴以及Google AI Studio的部分用户。这几个群体之间有重叠,也有门槛。

持有Ultra订阅,并不等于自动拿到Genie 4权限。得盯着Project Genie的候补名单(Waitlist)。目前的流程是:

  1. 访问Genie 4官方页面,找到加入候补名单的入口。
  2. 填写申请表格,等待审核通知。
  3. 收到邀请后,在指定产品中确认权限。

对开发者来说,现有的Gemini API密钥也不能直接调用Genie 4,得等专门的开发文档和账户授权。所以,现在网上若有人晒出Genie 4的操作界面,他们大概率是早期的受信测试者,而非普通付费用户。

现在的局限:它会“忘事”,也会“胡言乱语”

演示看着确实漂亮,可Genie 4距离一个真正完美的虚拟世界还差得远。Google DeepMind在模型页上没有回避,把眼下存在的边界一条条摆了出来。

先看视觉。物体持久性和视觉漂移是所有生成式视频模型都绕不开的毛病——交互时间一长,物体细节就可能走样。你刚搁下的杯子,过一阵子没准成了碗,要么颜色悄悄变了。场景改动越复杂、次数越多,这类问题就越被放大,到最后整个世界的一致性就撑不住了。声音这边也不够准。模型虽然能出声,但角色对白清不清楚、环境音合不合逻辑,都还有瑕疵。角色说话偶尔跟口型对不上,背景噪音也会忽有忽无。

时长上也有限制。目前能连续交互的是“数分钟”,并非无限时长会话。拿它做短片预演或者快速搭原型可以,想构建长期运行、状态始终一致的虚拟世界就不合适了。还原真实地点同样不够看。让它模拟你家客厅,它多半只能给个“像客厅”的场景,家具具体摆在哪儿没法精确复现。要用在高精度地理信息的场景里,现在还不靠谱。

另外,Genie 4产出的视频和音频一律带SynthID数字水印,方便辨认出AI生成的身份。应对深度伪造风险,这是Google的常规做法。

结语:它是工具,不是魔法

世界模型从“静态观察”迈到“动态交互”,Genie 4算是走到了这一步。对影视创作者和游戏开发者而言,它是个挺强的原型工具:写代码、搭布景之前,先用自然语言把场景“跑”一遍,光线、运镜、节奏合不合适,心里能先有个数。

普通用户就别把它当娱乐产品了。别指望明天就能钻进去玩上一整天。技术成熟得花时间,长时一致性和物理真实性这两块硬骨头尤其难啃。

想跟进的话,保持关注、申请候补名单,对目前的演示效果理性看待就行。一个能听、能说、能改的世界听着很美,可真要让它稳定跑起来,背后还得靠大量工程优化。

注:本文信息基于2026年10月28日Google DeepMind发布的官方公告及模型页说明。产品处于早期预览阶段,具体功能和支持范围可能随时间调整。

本文由本站编辑组整理与排版,内容基于公开信息核实后归纳发布,与文中提及的产品、公司无隶属关系。我们持续跟踪 AI 领域的模型、产品与行业动态,力求信息准确、表述清晰;文中涉及的名称、价格与功能细节可能随官方调整而变化,请以官方最新说明为准。如发现疏漏或表述有误,欢迎通过站内渠道反馈指正。

相关推荐 按相关度与热度排序

全部资讯 →
  1. 李飞飞团队发布Frameboy:浏览器里实时体验世界模型

    智东西作者 | 王涵编辑 | 云鹏智东西11月6日报道,刚刚,“AI教母”李飞飞的世界模型团队World Labs发布Frameboy,是一个基于Atlas优化的实时流式生成演示Demo。Frameboy从云端GPU流式传输画面,速度最高可达15FPS,这意味着每隔约67毫秒就能获得一帧新画面。与之对比,谷歌DeepM

    来源 腾讯网
  2. 谷歌Gemini Omni 1.2 Flash开放:15秒视频每秒0.07美元

    11月5日,谷歌DeepMind正式推出新一代视频生成与编辑模型Gemini Omni 1.2 Flash,并首次将Omni系列面向开发者全面开放(GA),在Gemini API付费层级、Vertex AI以及Gemini for Business同步上线。相比上一代,新模型带来三项核心升级:原生支持15秒视频生成(此

    来源 腾讯网
  3. 李飞飞World Labs发布Frameboy:单图生成3D世界,最高15帧实时漫游

    点下生成按钮,然后对着转圈的进度条干等好几分钟。过去玩 3D 世界模型或者视频生成的朋友,估计都被那种漫长的渲染折磨得没脾气了。 就在今天,李飞飞创办的 World Labs发布了一款名为 Frameboy 的研究预览版 Demo,直接把自家的自回归世界模型 Atlas 拉进了实时交互时代。 官方博客🔗 https:/

    来源 AI 行业观察
  4. Gartner发布2027年十大技术趋势:可抛弃型应用入选

    21世纪经济报道记者 孔海丽 AI降低开发成本后,软件即用即开发、用完即弃的做法可能越来越常见。 近日,Gartner发布了2027年十大战略技术趋势,将“可抛弃型应用”列入名单,大型定量模型、世界模型、AI上下文平台和智能体身份等关键词也在其中。 Gartner研究副总裁高挺在采访中解释,上一年度的重点是如何构建和应

    来源 腾讯网
  5. Pangram Image 1.0发布:99.96%准确率识别AI图像

    IT之家 11 月 6 日消息,Pangram Labs 是一家专注人工智能生成内容识别的 AI 实验室。其在本月 4 日正式发布了 Pangram Image 1.0 模型。该模型可通过热力图定位 AI 生成的内容。 Pangram Labs 利用 12 种前沿 AI 图像生成器,基于 100 张真实图片制作了一个

    来源 AI 行业观察
  6. 布卢门撒尔盯上苹果英伟达:白宫宴会捐款与App下架或引国会传票

    路透社昨日报道称,即将接任美国参议院常设调查小组委员会主席的民主党参议员理查德・布卢门撒尔(Richard Blumenthal),已经要求苹果、Meta、谷歌、英伟达、亚马逊和微软等参与特朗普白宫宴会捐款的科技企业主动提交相关文件。若企业拒不配合,可能在2027年1月面临传票。

    来源 TechWeb
  7. 布卢门撒尔盯上苹果英伟达:白宫宴会捐款与ICEBlock下架成调查焦点

    路透社昨日报道称,即将接任美国参议院常设调查小组委员会主席的民主党参议员理查德・布卢门撒尔(Richard Blumenthal),已经要求苹果、Meta、谷歌、英伟达、亚马逊和微软等参与特朗普白宫宴会捐款的科技企业主动提交相关文件。若企业拒不配合,可能在2027年1月面临传票。

    来源 TechWeb
  8. 布卢门撒尔盯上苹果等六巨头:白宫宴会捐款与ICEBlock下架成调查焦点

    【TechWeb】一场针对美国科技巨头的国会调查风暴,正在酝酿之中。 昨日有报道称,即将接任美国参议院常设调查小组委员会主席的民主党参议员理查德・布卢门撒尔(Richard Blumenthal),已经要求苹果、Meta、谷歌、英伟达、亚马逊和微软等参与特朗普白宫宴会捐款的科技企业主动提交相关文件。若企业拒不配合,可能

    来源 AI 行业观察
  9. AI找到1024位RSA弱点,大厂同月密集开源万亿模型

    DeepMind展示AI辅助发现1024位RSA漏洞,现代2048位系统暂不受影响。月之暗面、百度等密集开源大模型权重,AWS和Google Cloud推出新算力与数据工具。行业焦点从单纯拼参数转向智能体落地与安全防御,资本支出持续高位运行。

    来源 AI 应用前沿
  10. Gemini Omni 1.2 Flash更新:视频生成更稳,价格降三成

    2026年11月初的AI圈有点热闹。Google把Gemini Omni 1.2 Flash的价格打下来了,还能生成更长的视频;NVIDIA开源了Cosmos 3,想给机器人和仿真训练铺路。除了模型更新,Devin Review 2.0让代码审查便宜了不少,Vercel则甩出了一组硬核数据:他们的安全智能体一天内抓出了

    来源 AI 应用前沿
  11. Pangram 正式发布其 AI 图像检测模型,准确率达 99.96%

    IT之家 11 月 6 日消息,Pangram Labs 是一家专注人工智能生成内容识别的 AI 实验室。其在本月 4 日正式发布了 Pangram Image 1.0 模型。该模型可通过热力图定位 AI 生成的内容。Pangram Labs 利用 12 种前沿 AI 图像生成器,基于 100 张真实图片制作了一个 1

    来源 腾讯网
  12. 腾讯云MaaS:混元研发体系重组后,模型如何落到真实业务

    作者 | 土豆过去几年,大模型厂商发布新产品,总少不了一张密密麻麻的 Benchmark 成绩表。但当模型真正进入工作场景,评判标准就没那么简单了。今年 3 月,一项研究分析了 43 套 Agent 评测基准,涉及超过 7.2 万项任务,并与美国劳动力市场的 1016 种职业进行对照。结果发现,现有评测高度集中于编程等

    来源 腾讯网
  13. Kimi K3.1 Pro 开放权重,智能体编码基准再刷新

    月之暗面开源Kimi K3.1 Pro,SiliconFlow提供首日支持;GitHub发布指南强调从代码生成转向智能体工程。Together AI推出推理编译器,Vercel与Cursor打通部署流程,BigQuery让Pandas直接调用AI。本期还涵盖Google Cloud新实例及小红书长文本渲染技术。

    来源 AI 应用前沿
  14. 李飞飞World Labs推Frameboy:世界模型实时生成可玩画面

    今天,AI 圈的人在打游戏。 李飞飞的创业公司 World Labs 推出了自己的第一个「应用」Frameboy,由 AI 实时生成第一人称画面,把生成式 AI 变成了一种可以直接探索的体验。 Frameboy 是一个 Atlas 世界模型的优化演示版,使用云端 GPU 的流式传输,帧率最高可以达到 15 fps。实测

    来源 AI 行业观察
  15. Anthropic报告:80%能力增量由AI推动,进化速度翻倍

    编辑|泽南AI 帮助研发下一代 AI 的速度,终于有了具体数字。11 月 5 日,第三方评估机构 METR 发布一份关于 Anthropic 的调查报告表示:这家公司过去一年取得的基准能力进步,大致相当于此前两年的进步。从 8 月 12 日到 10 月 29 日,这个机构花费了约 11 周时间进入 Anthropic

    来源 腾讯网
  16. 谷歌AI新研究登Nature:普通智能手表无需袖带即可筛查高血压

    IT之家 11 月 7 日消息,当地时间 11 月 5 日,谷歌发布博文,介绍在《自然》(Nature)发表的最新研究成果。 谷歌推出了名为 AI-PPG-ACC-HTN 的多模态 AI 系统。该系统无需袖带校准,使用普通消费级智能手表便能被动检测高血压迹象。 官方表示,与常规方案试图估算极易受瞬时环境噪声干扰的单次瞬

    来源 AI 行业观察
  17. 美国企业开源模型支出89%流向中国:Kimi占61%,DeepSeek占15%

    美国企业花在开源大模型上的钱,近九成都流进了中国公司的口袋。 11月3日,硅谷风投门罗风投(Menlo Ventures)发布的《2026年企业 AI 现状报告》把这笔账算得很明白。基于对近 400 名美国企业 AI 业务负责人的调研,报告给出一个刺眼的数字:美国企业花在开源大模型上的支出,89%付给了中国模型。 拆开

    来源 AI 行业观察
向下滚动自动加载更多