自定义ENV中的OpenAI健身房库存数据输入

Question

我在股票交易AI工作，我不明白"self.observation_space“是如何工作的。在所有可以在互联网上找到的例子中，"env.observation_space.sample()“给出了一些随机数。

有人能解释如何从一个数组中获取值(在本例中是历史数据)并在观察空间中使用它吗？我应该使用什么样的空间:盒子还是.

我的输入只是高，低，接近，开放和一些技术指标，但我不知道如何通过"self.observation_space“给代理。

Answer 1

使用健身房的盒子空间，我们可以创建一个动作空间，它有一个离散的动作类型(买卖和持有)，以及一个连续的买卖金额谱(分别是帐户余额/头寸大小的0-100%)。

self.observation_space = spaces.Box(low=0, high=1, shape=(6, 6), dtype=np.float16)

你可以在这里找到答案：https://github.com/notadamking/Stock-Trading-Environment