强化学习环境库
为强化学习算法提供统一的环境接口,用于开发与比较算法,是 OpenAI 早期面向该方向推出的工具包。
拖动滑块完成拼图,通过后发送验证码
独立第三方 AI 评测平台 · 只用实测数据
OpenAI Gym 是 OpenAI 早期推出的强化学习环境工具包,用于开发和比较强化学习算法。显示,Gym 自 2022 年起便不再维护,已经缺少若干关键功能,其中一点是不支持 Numpy 2.0,同时官方文档网站也已下线。给出的替代方案是 Gymnasium——由原 Gym 团队维护的、可直接替换 Gym 的继任项目。建议用户升级到 Gymnasium,或联系所用软件的作者请其升级,并提供了一份从旧版 Gym 迁移到 Gymnasium 的迁移指南。
OpenAI Gym 是 OpenAI 推出的强化学习环境库,定位是给研究者和开发者提供一套统一的环境接口,用来开发和比较强化学习算法。它由 OpenAI 打造,面向做强化学习实验、需要标准环境来跑算法的人群。
当前页面说明,Gym 自 2022 年起已不再维护,并且缺少若干关键功能,其中不包含对 Numpy 2.0 的支持;的文档网站也已被下线。也就是说,这个项目本身已不再更新,官方已经把维护责任转移到了继任项目上。
给出的路径是 Gymnasium:由原 Gym 团队维护、可作为 Gym 直接替换的继任项目。建议用户把软件升级到 Gymnasium,或者联系所用软件的作者请求升级,并附有一份把旧版 Gym 迁移到 Gymnasium 的迁移指南,方便已有代码平滑过渡。
为强化学习算法提供统一的环境接口,用于开发与比较算法,是 OpenAI 早期面向该方向推出的工具包。
曾提供配套文档网站,用于查阅使用说明;说明该文档网站目前已被下线。
提供一份迁移指南,用于把旧版本 Gym 升级到 Gymnasium,帮助已有代码切换到继任项目。
明确说明 Gym 不支持 Numpy 2.0,这属于其停止维护后缺失的关键功能之一。
OpenAI Gym 适合用来理解强化学习环境库的早期形态,或在阅读旧论文、旧代码时对照背景。官网已明确它自 2022 年起不再维护,不支持 Numpy 2.0,文档网站也已下线,因此不适合作为新项目的起点。需要写新代码或跑正式实验时,应直接使用官方指定的继任项目 Gymnasium,或用迁移指南把已有 Gym 代码升级过去;如果依赖的软件仍在调用旧版 Gym,则可以联系该软件作者请求升级。
做算法实验、需要标准环境接口时,应转向官方指定的继任项目 Gymnasium,而不是继续用旧版 Gym。
手上有基于旧版 Gym 的代码,可参照官网迁移指南升级到 Gymnasium,让项目继续可用。
已说明 Gym 自 2022 年起不再维护且不支持 Numpy 2.0,新项目不应从它起步。
所用软件仍调用旧版 Gym 时,可按官网建议联系软件作者请求升级到 Gymnasium。
可以用,但已不再维护。说明 Gym 自 2022 年起停止维护,并且缺少若干关键功能。对依赖它运行的项目,建议按官网指引升级到继任项目 Gymnasium,以获得持续的维护支持。
Gymnasium 是官网给出的替代方案,定位为 Gym 的直接替换版本,由原 Gym 团队成员维护。
官网说明 Gym 自 2022 年起不再维护,因而缺少若干关键功能,不支持 Numpy 2.0 就是其中之一。由于项目已停止更新,这一兼容性问题不会通过在 Gym 内升级解决,可行路径是切换到官方指定的 Gymnasium。
官网说明文档网站已被下线。需要查阅相关说明时,可转向官网推荐的继任项目 Gymnasium 对应的资料,而不是继续依赖原来的 Gym 文档站点。
提供了一份迁移指南,用于把旧版本 Gym 升级到 Gymnasium。实际操作时可以按该指南逐步替换原有 Gym 调用;如果代码封装在第三方软件里,则按官网建议联系软件作者请其升级。