OpenAI Gym和Python线程

Question

我正在开发A3C / ACER的变体，我有几个工作线程，每个工作线程都在自己的线程上运行。 我正在使用OpenAI体育馆环境。

Python线程工作正常，但不能完全利用所有内核。 由于没有阻塞的I / O，因此不会进行上下文切换。

我希望工作人员在各自环境中执行操作时以某种方式释放GIL。

非常感谢您的反馈：这是否有意义，并且有可能吗？

Answer 1

回答我自己的问题：我发现在OpenAI Universe-starter-agent中展示了一种相当有效的方法： https : //github.com/openai/universe-starter-agent 。

该实现使用Tensorflow并运行独立的进程，包括参数服务器。

我认为这对于参考其他人也很有用。