增强学习学习新得

增强学习学习的新得

这个其实我也没有打错字啦，就是刚学一周左右的增强学习然后过来总结下收获。一周历程就是图书馆借了几本书然后就看，运气不错，图书馆的书还不错，学习一个新的东西最好还是多有几本同类讲解相同知识的书比较好，因为不同逻辑可以让你理解更加到位一点，然后就是互补。先看了差不多的李宏毅大哥的增强学习系列，感觉是到位了，公式推导也很不错，但是我英语记不住单词功底有点差，就很多细节不会，大致有个feeling，但是还是有疑惑的，因为我之前没有实现过哪怕一个例子所以就手和脑分开了。然后我去看莫烦的增强学习，这个就更直观了，帮我对于增强学习最基础的qlearning落实了，然后直观明白了一些概念，毕竟李宏毅教导的学生基础比较好，听完他的有点空中楼阁，我菜。然后看了一个pytorch的实现的DQN玩那种简单游戏的，这个是另外B站找的，因为我不会tensorflow所以没继续看莫烦的代码。后面我又开始跟着第三个老师学，这个简直清晰，没有一句废话，刚开始把增强学习所有的概念讲完，就更加有数，建立了更多知识节点的逻辑。这很关键。

[第三个老师的视频网址，前面李宏毅还有莫烦很容易搜到的所以不附加链接了](深度强化学习（全）_哔哩哔哩_bilibili

然后学到actor-critic真正弄懂了原理，和之前李宏毅的直觉对应起来了，一个策略网络一个价值网络，然后其实就是Q V U之间关系弄懂，然后明白激励到底怎么搞，然后期末结束，