增强学习学习的新得
这个其实我也没有打错字啦,就是刚学一周左右的增强学习然后过来总结下收获。一周历程就是图书馆借了几本书然后就看,运气不错,图书馆的书还不错,学习一个新的东西最好还是多有几本同类讲解相同知识的书比较好,因为不同逻辑可以让你理解更加到位一点,然后就是互补。先看了差不多的李宏毅大哥的增强学习系列,感觉是到位了,公式推导也很不错,但是我英语记不住单词功底有点差,就很多细节不会,大致有个feeling,但是还是有疑惑的,因为我之前没有实现过哪怕一个例子所以就手和脑分开了。然后我去看莫烦的增强学习,这个就更直观了,帮我对于增强学习最基础的qlearning落实了,然后直观明白了一些概念,毕竟李宏毅教导的学生基础比较好,听完他的有点空中楼阁,我菜。然后看了一个pytorch的实现的DQN玩那种简单游戏的,这个是另外B站找的,因为我不会tensorflow所以没继续看莫烦的代码。后面我又开始跟着第三个老师学,这个简直清晰,没有一句废话,刚开始把增强学习所有的概念讲完,就更加有数,建立了更多知识节点的逻辑。这很关键。
[第三个老师的视频网址,前面李宏毅还有莫烦很容易搜到的所以不附加链接了](深度强化学习(全)_哔哩哔哩_bilibili
然后学到actor-critic真正弄懂了原理,和之前李宏毅的直觉对应起来了,一个策略网络一个价值网络,然后其实就是Q V U之间关系弄懂,然后明白激励到底怎么搞,然后期末结束,