1.3.1　Gym简介

Gym由著名的人工智能非营利性组织OpenAI开发，它集成了众多典型的深度强化学习环境模型，例如著名的Cartpole环境和Atari游戏环境等，是深度强化学习研究领域不可或缺的重要工具包。

OpenAI Gym主要由两部分组成：

（1）Gym开源库是测试问题的集合，当测试强化学习算法时，测试问题就是环境模型。Gym开源库提供了一些经典的测试环境，这些测试环境都使用公共的接口函数，允许用户设计通用的强化学习算法。

（2）OpenAI Gym服务提供了一个站点，允许用户对他们的测试结果进行比较。例如Cartpole-v0游戏的服务站点为https://gym.openai.com/envs/CartPole-v0。