这个 “零” 主要是说明我写这个笔记的目的以及一些期望. Spinning Up 算是第一个我真正学习的 RL 项目, 我希望把 Spinning Up 项目中实现的算法都讲解一遍.

准备

首先 clone 下 spinningup 项目 (不要告诉我你连 Git 都没下载),

1
git clone https://github.com/openai/spinningup.git

然后按照spinningup 安装教程将该装的都装一遍, 接下来的代码都在其中执行.

已经完成的

  • 参考资料