论文阅读与实现
关注
分享
扫一扫
微丶念
所谓的不感兴趣，仅仅只是自己没有做好而已。
展开
-
Ubuntu14.04 + Python3.4.3 + OpenCV3.1.0的安装配置
本文主要介绍在配置OpenCV3.1.0中的几个坑。如何设置cmake Python3 因为我没有使用Anaconda，所以，cmake将会检测到两个版本的python，而cmake倾向于使用低版本的python，也就是会原创 2018-03-15 10:30:16 · 463 阅读 · 0 评论 -
DDPG之OU过程
Ornstein-Uhlenbeck过程浅析 上周在实现DDPG的过程中，发现其中用到了一个没见过的随机过程，叫做Ornstein-Uhlenbeck过程，所以简单地去了解了一下，下面我们进行概要讨论。 OU过程是一种序贯相关的过程，在DDPG中用于实现RL的探索，想想也对，毕竟RL也是一种序贯相关模型，引入序贯噪声也不无道理。先参考维基百科看看OU过程长什么样子，OU...原创 2017-11-06 20:04:08 · 15257 阅读 · 24 评论 -
关于baselines示例程序train_cartpole.py的ImportError
问题导出 为了更方便地实现自己的一些想法，我最终还是向OpenAI的baselines屈服了，因为自己的一些实现总是难与各大论文给出的结果进行对比。于是我今天安装了baselines，其中还是有一些坑的，这里主要介绍在安装完成之后，运行示例时cartpole.py所遇到的坑，它叫做ImportError。...原创 2018-03-14 11:41:24 · 1691 阅读 · 0 评论 -
《Selective Experience Replay for Lifelong Learning》与水塘抽样
引子 最近在调研论文，这个过程中我常常能学到一些好东西，比如本文要聊到的水塘抽样（reservoir sampling）。 先大致说明一下论文要解决的问题以及想法。 &nbs原创 2018-04-01 17:47:40 · 1029 阅读 · 0 评论