与开放ai健身房/稳定基线的集成

Question

开放人工智能健身房最有可能成为ML的基准测试标准，稳定基线算法是最受欢迎的ML库之一。有没有关于如何将Webots与健身房环境集成的指南，以便可以使用稳定的基线？健身房环境暴露了一些功能，比如step和reset，但是我不确定这些功能是如何用来控制webots的。如果有更多webots API/外部控制知识的人能够规划出集成的路径，我将非常感激-甚至为其他人写一份关于如何集成它的指南(如果还没有完成的话)？

Answer 1

我没有一个明确的逐步指南，但这里有一些事实可以帮助你将Webots与开放ai健身房集成：

体育馆Webots确实提供了一个Python API：https://cyberbotics.com/doc/guide/using-python

• The最近版本的Webot提供了使用所谓的“外部控制器”的可能性，此功能允许您在任何其他应用程序中集成控制器，并让应用程序自行启动控制器，而不是Webot启动控制器：https://www.cyberbotics.com/doc/guide/running-extern-robot-controllers

• Some用户已经尝试将Webot与https://github.com/talregev/gym-webots

集成在一起

最后，如果你打算做一个例子，并同意公开这个样本(即在Github账户上)，让我知道我可能能够关注这个项目，并帮助你解决你的Webots特定问题(我也对这个主题感兴趣，但没有足够的时间投资于此)。

Answer 2

现在，您可以查看一个简单的OpenAI健身房界面集成的Webots示例：

https://www.cyberbotics.com/doc/guide/samples-howto?version=master#openai_gym-wbt

另外，请查看Deepbots框架：

https://github.com/aidudezzz/deepbots