清华米哈游开源GameScaling:四档八个模型,覆盖Minecraft与Doom

资讯 AI 行业观察 全文 3326 字 · 约 9 分钟读完 配图 7 张 分类开源游戏

迈向通用游戏智能,清华、米哈游开源GameScaling系列模型

所属频道 开源生态影视与游戏
清华米哈游开源GameScaling:四档八个模型,覆盖Minecraft与Doom(配图 1)

张宽,清华大学人工智能学院博士生,主攻游戏智能体。

苏悦,香港大学 MMLab 博士生,研究方向为世界模型与具身智能。

罗润,新加坡国立大学博士生,专注全模态基础模型。

郑银河,米哈游崩坏系列 AI NPC & Gameplay 技术团队负责人。李一鸣,清华大学人工智能学院助理教授、厘清智能创始人,此前曾任英伟达研究科学家。


米哈游近日与清华大学、香港大学、新加坡国立大学等学术机构合作,开源首个通用游戏模型系列 GameScaling。该系列共八个模型,分为 0.8B、2B、9B、27B 四档规模,权重和推理代码都以 Apache 2.0 协议发布。



  • 项目主页: https://gamescaling.github.io

  • 模型网址: https://huggingface.co/THUSI-Lab/GameScaling

  • 代码仓库: https://github.com/THUSI-Lab/GameScaling


GameScaling 能根据画面、任务提示和近期交互历史,输出键盘与鼠标操作,并随游戏进程持续判断下一步动作。在《我的世界》里,它可以采矿、合成、打僵尸;在 Doom 中,它能战斗、导航;遇到场景逃脱任务,它也会自己找路。


清华米哈游开源GameScaling:四档八个模型,覆盖Minecraft与Doom(配图 2)

图 1 GameScaling-2B-S3 在 Minecraft 中执行采集、合成与战斗任务的实时演示片段。来源: GameScaling 网站宣传视频


模型在游戏里操作得漂亮,分数也拿得出手。《我的世界》MCU 基准共 30 项任务,GameScaling-27B-S1 的平均成功率达到 63.3%。团队实测显示,0.8 - 9B 这 6 个模型跑在单张 H200 或 RTX 5090 上,就能做到接近每秒 5 次观测、每秒 30 步动作的实时交互。


把 GameScaling 开源出来,团队想和社区一起琢磨一件事:AI 怎么才能把一个世界里学到的经验,搬到另一个世界去用?游戏和人工智能相伴多年,这道题是自然而然冒出来的。1997 年深蓝击败国际象棋世界冠军;2012 年深度学习爆发之后,AlphaGo 和 AlphaStar 分别在围棋和《星际争霸 II》中战胜世界冠军,OpenAI Five 在 Dota 2 中展示了多智能体协作的能力;进入大模型时代,Voyager 又在《我的世界》里探索环境、积累技能。AI 从搜索、学习一路走到规划与行动,游戏既是见证者也是推手。

不过,通用游戏智能还横着另一道坎。现实世界里,机器人不管进工厂还是进家庭,重力、碰撞这些物理规律都成立,共同的规律让经验积累和规模化学习有据可依。虚拟世界却能推倒重来:画面风格、物理机制、动作空间、任务目标,换一款游戏可能全变。同样是「向前走」,可能是第一人称视角下的三维移动,可能是上帝视角下的平面移动,也可能是横版世界中的平台跳跃。


清华米哈游开源GameScaling:四档八个模型,覆盖Minecraft与Doom(配图 3)

图 2 现实世界的运行受一套确定的物理法则约束,这是积累经验、开展规模化学习的前提;而游戏不同——画面风格、物理机制、动作空间连同任务目标都能改,至于能不能照样保住 “Scaling Law”,目前还没有系统性的研究。来源:GameScaling 论文图 1


世界本身的规则一直在变,那套曾经屡试不爽的办法——加数据量、加多样性、加模型规模——还能继续管用吗?


为了把这个问题弄清楚,团队基于 Qwen3.5 系列做持续预训练,拿开源社区的游戏轨迹,把视觉语言模型的知识和可执行操作接上。模型看着游戏画面、任务提示和近期交互历史,输出接下来 200 毫秒的键盘与鼠标操作。看画面、快速想、做动作、接收新画面,再决定下一步,智能体在游戏里行动的基本循环就是这么转起来的。


实验把模型、数据时长、数据多样性三个变量拆开来看:模型规模设了 0.8B 至 27B 四档,游戏数据预算设了 50 至 1600 小时六档,游戏轨迹从全部来自《我的世界》到多游戏混合共五种多样性配比,一共组成 120 组受控配置。评测范围也从训练覆盖的 MineCraft 和 Doom,扩到没见过的相近 3D 世界,再到视角和操作机制差别更大的 2D 和 2.5D 世界,看经验与智能究竟能迁移多远。


研究先撞见了一种有意思的学习节奏:模型早期像是在熟悉自己的「手」。初始训练之后,按键、鼠标和动作格式的预测改善得很快,收益也出现在训练没覆盖的世界里,团队管这叫「接口阶段」。再往后是「世界阶段」,想继续提升,越来越看模型经历过哪些游戏,收益主要落在训练覆盖和相近的世界,对遥远世界的损失甚至会往上走。


清华米哈游开源GameScaling:四档八个模型,覆盖Minecraft与Doom(配图 4)

图 4 训练初期,按键、鼠标以及动作格式这三类的预测误差都掉得很快。四幅图按顺序分别是按键损失、鼠标损失、格式损失,还有鼠标方向的预测准确率。S1 指的是单游戏轨迹配比,S4 则是多游戏轨迹配比。来源:GameScaling 论文图 2。


数据多样性的价值由此变得具体。同样按 1600 小时的预算,多游戏混合训练在 OmniGameArena 七个没见过的相关 3D 世界里,跨配比、跨模型规模的平均得分约为单独训练 MineCraft 的 2.8 倍。移动、转向、瞄准这些经验,确实有机会越过游戏的边界。


清华米哈游开源GameScaling:四档八个模型,覆盖Minecraft与Doom(配图 5)

图 5 展示的是 GameScaling 在 OmniGameArena 里此前没见过的相关 3D 环境中执行任务,涉及移动、射击、穿越障碍和从场景中逃脱。来源:GameScaling 官网宣传视频。


模型规模带来的影响是另一回事。参数更大的模型往往能更省力地吃透有限的经验,可要是长时间只练一个游戏,换到差别较大的世界,它的退步也可能更扎眼。这说明参数量、数据量和数据配比得放在一起设计:学得快,不等于迁移得远。


团队还拟合出一条经验 Scaling Law,把这三个因素和验证损失关联起来,用来估计在训练覆盖到的世界里能获得多少学习收益。但换到差异明显的未见世界,一味加数据、加模型规模,并没有换来稳定提升。GameScaling 由此把扩展的两面都摆了出来:现有的持续预训练能攒下可迁移的操作经验,要想泛化得更广,还得在world覆盖和交互学习机制上继续找办法。


还有一个因素绕不过去,就是时间——模型要走进真正跑起来的游戏,就得面对它。


敌人压过来,目标在移动,几秒前还算正确的判断可能已经作废。团队为此测了两种模式:「模型思考时暂停游戏」和「游戏持续运行」。按论文的实时评测设置,GameScaling-9B-S3 在四个基准上的平均分是 25.3,高于所测 OpenAI、Anthropic、Google 前沿模型中的最高值 19.2。这个比较虽然掺进了部署和服务延迟的影响,却仍指向游戏智能的一条实际要求:决策得赶得上改变局面。


清华米哈游开源GameScaling:四档八个模型,覆盖Minecraft与Doom(配图 6)

图 6:实时战斗演示,左侧是 Claude Opus 5.0,右侧是 GameScaling-9B。模型生成动作时游戏一直在运行,画面时延为该片段所记录,包含相应部署与调用方式带来的影响。来源:GameScaling 官网宣传视频。


作者称,GameScaling 目前重在摸清跨世界的 Scaling 现象,还没有针对最终游戏表现做专门优化。他们希望这套经验能指导之后游戏数据的收集、构建和配比,让扩大训练规模更有依据,也为做出能力更强、适应面更宽的游戏模型指个方向。至于跨到更远的世界,仍要摸索更广的游戏经验,以及在实际交互中靠成败反馈来学习的机制。通用游戏智能的下一步,目标也因此更清楚了。


电影《头号玩家》好看的地方,一半在规则各不相同的世界,一半在能一起闯荡的伙伴。要走到那样的未来,既得有不断扩充的虚拟内容,也得有能读懂不同规则、真正下场参与的智能同伴。


我们相信,技术往前走,以后的智能游戏 NPC 也许能在玩家说一句「帮我守住入口」之后,看地形、挑位置,并跟着战况调整动作;玩家和他的智能伙伴,还能带着上一个世界的经验,一起赶赴下一场冒险。GameScaling 模型开源,正好给这件事留了个能验证的研究起点:去弄清楚怎样把在一个世界里学会的本事,变成走进下一个世界的能力。



图片



本文由本站编辑组整理与排版,内容基于公开信息核实后归纳发布,与文中提及的产品、公司无隶属关系。我们持续跟踪 AI 领域的模型、产品与行业动态,力求信息准确、表述清晰;文中涉及的名称、价格与功能细节可能随官方调整而变化,请以官方最新说明为准。如发现疏漏或表述有误,欢迎通过站内渠道反馈指正。

相关推荐 按相关度与热度排序

全部资讯 →
  1. 百度开源ERNIE-5.5-Flash-Base:280B参数MoE,预训练权重开放

    IT之家 11 月 5 日消息,百度文心大模型今日发布 ERNIE-5.5-Flash-Base,开放 ERNIE 5.5 Flash 预训练终点的权重。这是一个稀疏 MoE 语言模型,总参数 280B,每 token 激活 14B,在 33.5T tokens 上从零完成预训练;最长训练上下文为 128K,微调与推理

    来源 腾讯网
  2. 谷歌、腾讯扎堆入局:AI游戏平台混战开打,爆款已现

    作者| Mia编辑| 糖炒山楂AI已然攻占了文娱行业的每一环。热搜上只剩芒果同红果分庭抗礼,借助AI制作的游戏,也在近一两年里迎来了数量的大爆发,深刻影响着行业未来走向。前几日的Steam新品节,参展试玩版总数多达8200款,相当于去年4200款的翻番。据不完全统计,三成多以上游戏使用“生成式AI内容”。此前TapTa

    来源 腾讯网
  3. MLCommons上线Candela:Safety 1.2.1与Jailbreak 1.1可按需跑测

    MLCommons近日发布AILuminate Safety 1.2.1和Jailbreak 1.1两项基准,开发者可通过Candela服务自测AI系统产生有害内容的风险及抗攻击能力。基准由80多家机构共识构建,覆盖12类危害场景,并采用确定性评估器提升准确性。公开结果显示27个系统表现差异显著,开放权重模型从第4到9

    来源 AI 科技快讯
  4. Hugging Face CEO 德朗格:AI 末日概率近零,闭门开发才是真风险

    Hugging Face首席执行官克莱芒·德朗格近日表示,他个人对AI引发末日级风险的估计(P(Doom))接近于零。在他看来,外界高估了模型失控的概率,却低估了风险的真实来源:少数几家公司在闭门环境中开发最强模型,外界无从审查。这场围绕开源与闭源的争论,实质上是关于AI治理透明度与责任分配的争论。

    来源 AI 科技快讯
  5. Box联合英伟达推智能体检索系统:速度提4倍,token降90%

    企业内容管理平台 Box 推出了一套采用“智能体优先”思路的内容检索系统,其核心基于英伟达 Nemotron 开源模型。据称,新系统响应查询的速度提升至原来的四倍,错误率降低 20%,而消耗的 token 数量减少 90%。这标志着企业搜索正从“检索增强生成”的单轮问答,转向由模型自主规划、多步执行任务的智能体检索架构

    来源 AI 科技快讯
  6. 华为详解 HarmonyOS 7.0 智感旋转:双传感器协同,Mate 90 已回归

    IT之家 11 月 4 日消息,在今年 10 月 1 日发布的华为 Mate 90 系列旗舰手机上,「智感旋转」功能正式回归。已经购买到 Mate 90 的用户可在设置中搜索「智感旋转」跳转至如下页面,并开启该功能。 开启自动旋转开关,将手机水平放置后打开图库照片。如果照片能随人脸朝向自动切换横竖屏,则功能正常,否则异

    来源 AI 行业观察
  7. 中科大团队发布开源RNA序列基础模型structRFM,成果登上《自然》

    从中国科学技术大学获悉,该校科研团队发布一款开源核糖核酸(RNA)序列基础模型structRFM,提高了模型在RNA结构预测与功能推断一系列下游任务中的性能,有望助力人工智能驱动的科学研究、生物学机制理解、药物发现等。5日,相关研究成果发表于国际学术期刊《自然》。(央视新闻)

    来源 AI 行业观察
  8. 文心5.5Flash Base开源:2800亿MoE,多项基准超DeepSeek-V4

    11月5日,百度正式开源全新基座模型文心5.5Flash Base,在知识、推理、数学、代码、多语言和长上下文等多项基准测试中刷新同尺寸模型SOTA表现,超越DeepSeek-V4-Flash-Base、Hy3-preview-Base等同类模型。 该模型采用MoE架构,总参数量达2800亿,激活参数140亿,使用33

    来源 AI 开发者社区
  9. Hugging Face谈开源AI:低准入不等于低总成本,账单藏在哪

    开源AI模型正从边缘走向主流,企业、政府和初创公司都对其低成本、高控制和灵活性寄予厚望。然而,随着能力越来越强的模型免费开放,商业价值如何捕获?中国开源力量崛起,美国玩家能否守住优势?Hugging Face政策负责人围绕成本、风险与权衡展开深度剖析,为开源AI的可持续发展提供关键思考。

    来源 AI 科技快讯
  10. 一加 Ace 7 Pro 体验:潜望长焦加主动风扇,二号人物要抢主角

    「别小看二号人物啊,我也是能当主角的。」《灌篮高手》里,常年给赤木刚宪和流川枫传球的宫城良田,有过这么一句略带不甘的独白。把这句话搬到手机圈,恰好是一加 Ace 系列过去几年的真实处境。过去,一加 Ace 是纯粹的游戏机,一直都是给数字系列打辅助的「小弟」。想买拍照得体、兼顾日常的手机,预算够的都会直奔数字旗...

    来源 腾讯网
  11. 腾讯混元Hy4上线:首增视觉理解,TokenHub调用2.5折起

    11月4日,腾讯混元Hy4正式上线,首次引入视觉理解,可操作电脑完成跨应用任务,综合表现跻身最强开源模型之列。Hy4已上线腾讯云TokenHub,每百万Tokens输入最低0.3元。即日起至12月31日,通过TokenHub按量调用享5折;11月18日前通过Token Plan接入享2.5折,全球新老用户同享。

    来源 AI 行业观察
  12. 腾讯 Hy4 正式版亮相:挤进最强开源阵营,主打"真干活"

    腾讯混元 11 月 4 日发布最新一代大模型 Hy4 正式版。比起 8 月底推出的 preview 版,这回不仅显著扩大预训练与后训练规模,还首次引入视觉能力——能结合感知、推理与工具调用,做图像处理、图表分析与数学视觉推理。更难得的是 Hy4 首次支持"电脑操作",可混用命令行与图形界面;腾讯还针对 Blender、

    来源 AI 开发者社区
  13. OpenAI收购Pierre Computer:Codex补齐代码托管,直面GitHub

    11月4日,OpenAI将收购开发工具初创公司Pierre Computer,进一步扩大旗下Codex编程平台的功能,并向微软GitHub长期占据主导地位的代码托管市场发起挑战。Pierre Computer的部分技术目前已经应用于Codex,OpenAI计划进一步整合其代码存储(Code Storage)功能。交易财

    来源 AI 行业观察
  14. Adobe五款应用被AI复刻:开发者称项目远未就绪

    作者 | Steef-Jan Wiggers译者 | 明知山Brandon Thomas 把他用 AI 构建的七款 Adobe 应用 开源替代项目 发到了 Hacker News 上,但立刻又给它泼了冷水。“我还没准备好把这个发到 HN 上,”他写道,“离可读还差得很远。”他表示等项目结束 Beta 测试阶段后会再发一

    来源 腾讯网
向下滚动自动加载更多