如何将元组列表作为 OpenAI Gym 中的动作空间传递？答案

【问题标题】：How do I pass a list of tuples as the action space in OpenAI Gym?如何将元组列表作为 OpenAI Gym 中的动作空间传递？
【发布时间】：2020-04-06 20:00:41
【问题描述】：

从头开始制作 OpenAI Gym 环境时，必须定义动作空间。这是使用来自数据包“空间”的自己的“数据结构”完成的。有几种不同类型的空间，如 Box、Discrete 等。我有一个我想用作操作空间的元组列表。有没有办法做到这一点？

我本可以使用 spaces.Box(low=0, high=1, shape(4,12), dtype=np.int) ，但这增加了很多非法行为。我对使用例如空格的解决方案持开放态度。Box 然后禁止/删除非法操作，但最好只插入我的预制元组列表。

【问题讨论】：

【解决方案1】：

OpenAI Gym 有一个Tuple action space。用法示例：

from gym import spaces
action_space = spaces.Tuple((
        spaces.Discrete(9),
        spaces.Discrete(5)))

【讨论】：