python - python OpenAI gym monitor在录制目录下创建json文件

Question

我正在健身房CartPole-v0环境中实现价值迭代，并希望将代理动作的视频记录在视频文件中。我一直在尝试使用 Monitor 包装器来实现这一点，但它会在录制目录中生成 json 文件而不是视频文件。这是我的代码：

env = gym.make('FrozenLake-v0')
env = gym.wrappers.Monitor(env, 'recording', force=True)
env.seed(0)
optimalValue = valueIteration(env)
st = time.time()
policy = cal_policy(optimalValue)
policy_score = evaluate_policy(env, policy)
et = time.time()
env.close()
print('Best score: %.2f  Time: %4.4f sec' % (policy_score, et-st))

监控 json 文件

我已按照本教程进行操作，但不确定出了什么问题。我用谷歌搜索了很多，但没有发现任何有用的东西。

标签： pythonpython-3.xmachine-learningreinforcement-learningopenai-gym

Answer 1

上次我检查时，这工作正常：

env = gym.wrappers.Monitor(env, "./vid", video_callable=lambda episode_id: True,force=True)

这将记录所有剧集的视频。您可以使用episode_id来选择要录制的剧集。