李飞飞World Labs发布Frameboy：单图生成3D世界，最高15帧实时漫游
点下生成按钮，然后对着转圈的进度条干等好几分钟。过去玩 3D 世界模型或者视频生成的朋友，估计都被那种漫长的渲染折磨得没脾气了。 就在今天，李飞飞创办的 World Labs发布了一款名为 Frameboy 的研究预览版 Demo，直接把自家的自回归世界模型 Atlas 拉进了实时交互时代。 官方博客🔗 https:/
按下生成键，盯着转圈的进度条一等就是好几分钟。以前玩 3D 世界模型或视频生成的人，多半都被这种漫长渲染磨到没脾气。
李飞飞创办的 World Labs 今天推出研究预览版 Demo，名字叫 Frameboy，把自家自回归世界模型 Atlas 带进了实时交互阶段。
官方博客🔗 https://www.worldlabs.ai/blog/atlas-realtime
打开浏览器就行，云端 GPU 以最高 15 fps 的帧率把画面实时串流过来，镜头可以像打游戏一样自由操控，在单张图片生成的 3D 世界里随意走动。
走错方向也好，试了个烂点子也好，试错成本几乎为零，鼠标一划换个角度就能接着探索。
今年 9 月底 AMD 宣布以 82 亿美元（约合人民币 550 亿元）全股票收购 World Labs，这次更新是收购之后李飞飞这支空间智能团队交出的又一份技术答卷。
把世界模型装进复古掌机，单张图实时跑出 15 帧
要说清这次更新，得先提两个月前刚亮相的 Atlas。
Atlas 是自回归世界模型，当时最大的卖点是逐帧生成画面，并支持像素级精度的相机视角控制。拿一张图脑补出虚拟 3D 世界，或者用几张多视角照片还原真实地标、查看建筑工地进度、给电影勘景，它都能做。
问题是太慢了。
每调一次机位，都得等几十秒甚至好几分钟才看到渲染结果，创作者搭场景、规划运镜时难免束手束脚，每按一次生成键都像开盲盒。
为了缓解世界模型漫长的生成等待，团队对 Atlas 做了深度推理优化，并推出搭载这一优化版模型的实时交互 Demo Frameboy，复古掌机式的造型很容易让人想到经典的 Game Boy。
画面生成速度提升到最高每秒 15 帧之后，用户已经明显感觉不到点击生成那个割裂的动作。
在浏览器里推拉摇移相机，云端就会源源不断地把新视角画面实时推流到屏幕上。
官方放出的客厅对比演示里，以前用慢速模型手动迭代，用户得小心翼翼地在房间里点四个关键帧机位，按下生成等视频出来，发现角度不对再拖拽重试，来回折腾好几轮。
到了 Frameboy 的实时模式，直接开着虚拟相机在房间里转圈就行，视野所及之处画面同步实时更新。
熟悉 World Labs 去年研究预览项目 RTFM 的人，可能会觉得复古掌机形态有点眼熟。
不过和当年那个轻量级帧生成模型相比，如今的 Atlas 模型规模大得多，吞下的数据量高出好几个数量级，能力边界也完全不同了。
去年的 RTFM 主要只能在已有几个视角之间做插值过渡；现在的 Atlas 只喂一张静态图片或一段文字描述，就能从零把周边场景脑补出来，放进 Frameboy 的空间上下文里任人交互探索。
多视角新视图合成能力也完整保留并做了升级，输入几张真实世界名胜古迹的多角度照片，就能在浏览器里直接开启一场赛博实景漫游。
上传图片，亲手搭个 3D 游乐场
只在官方预设的几个场景里逛，显然不够过瘾。
为了让大家亲手搭出自己的 3D 世界，World Labs 把实时串流能力塞进网页端应用 Viewfinder，做成实时渲染叠加模式，目前处于封闭测试阶段，候补名单已经开放申请。
在 Viewfinder 里，可以用自己上传的图片当起点，操控虚拟相机一步步往外走，一帧一帧把整个 3D 空间搭建起来。
Atlas 每生成新的一帧，都会同步输出色彩与深度信息，帮用户在视觉上对齐整个三维空间结构。
场景主体大致搭好后，唤出 Frameboy 叠加层只要一下，先前逐帧构建的静态工程立刻转为实时串流的 3D 游乐场。
团队给未来定的方向很明确：让 Atlas 这类世界模型充当下一代的生成式渲染器。
算力门槛这块，官方在博客末尾并没有绕开。
Frameboy 眼下只能跑在云端的高性能 GPU 服务器上。跟传统本地渲染相比，这笔开销实在谈不上便宜。
可翻翻计算机图形学的历史，哪项颠覆性技术刚出来时不是又慢又贵。底层硬件和软件算法一起往前走，今天贵得吓人的云端实验室玩具，早晚会变成白菜价的普及工具。
550 亿联姻苏姿丰，加速贴近底层硬件
软硬协同降本提速这件事上，World Labs 眼下算是找对了靠山。
9 月 28 日，也就一个多月前，芯片巨头 AMD 官宣了一笔重磅收购协议：拟以 82 亿美元的全股票交易，把成立仅两年的 World Labs 收入囊中。
交易预计今年底完成交割，将直接创下 AMD 历史上仅次于赛灵思的第二大收购纪录。
这家总部位于旧金山的明星独角兽由李飞飞与 Justin Johnson、Ben Mildenhall、Christoph Lassner 联合创办，前一轮融资时估值还是 50 亿美元。
按收购安排，交易完成后李飞飞将正式出任 AMD 执行副总裁兼首席科学家，直接向苏姿丰汇报；原有研发团队完整保留，继续由 Justin Johnson 和 Ben Mildenhall 带队死磕空间模型与物理 AI。
当时外界还在议论：一家卖芯片的硬件大厂，为什么肯花 550 亿人民币买一支研究 3D 世界模型的算法团队？
如今结合 Frameboy 对推理速度的极致要求来看，两边的考量就再清楚不过了。
苏姿丰盯上的，是大语言模型之后的下一个必争之地——涵盖机器人仿真、空间理解与三维重建的物理 AI。
收下 World Labs，AMD 就能第一时间摸清下一代世界模型的真实算力负载特征，反过来指导自家 GPU 架构、AI 芯片和 ROCm 软件栈的路线规划，在机器人与空间计算赛道上跟英伟达正面掰手腕。
李飞飞团队这边，正如她在收购公告中所言，下一代 AI 需要模型研究、系统与算力的紧密协同。
过去在云端跑个实时世界模型，还得心疼昂贵的 GPU 账单；如今直接和自家芯片团队贴身打磨硬件与底层算子，把实时生成式 3D 渲染真正塞进千家万户的终端设备，显然又近了一大步。
