2021年02月_hehedadaq

原创【Spinning up】零、DRLib:一个简洁的强化学习库，集成了HER和PER

DRLib:一个简洁的强化学习库，集成了HER和PERMy DRL library with tensorflow1.14 and pytorch, add HER and PER, core codes based on https://github.com/openai/spinningup前言：求star，欢迎开issues！主要的框架，基于spinningup。目前分享出来的有，tf1和torch版本的主流offpolicy强化算法，DDPG，SAC，TD3，对每个算法都增加了非常简洁的*

2021-02-23 23:29:22 1773

转载【Spinning Up】2. 实验输出

目录1. 算法输出2. 保存目录(save directory)位置3. 载入并运行训练的策略4.调用价值函数5. 联系方式转载链接：https://blog.csdn.net/wudixi/article/details/104447010备注：在Spinning Up当前的实现中，没有方法重新开始训练未完成训练的智能体（partially-trained agents）。我自己实现了一半的功能，将buffer存到本地，将policy net参数存到本地，勉强算可以.

2021-02-24 22:33:27 1166

转载【Spinning Up】三、绘制结果

【Spinning Up】绘制结果文章目录【Spinning Up】绘制结果路径参数示意图：可选参数解析:联系方式转载链接：https://blog.csdn.net/WUDIxi/article/details/104448418Spinning Up自带了一个plotting模块，用来绘制输出，调用格式如下：python -m spinup.run plot [path/to/output_directory ...] [--legend [LEGEND ...]] [--xaxis

2021-02-24 22:10:17 1327

原创 matplotlib均值和方差图-多组成功率为例-代码

matplotlib多组均值和方差图-成功率为例文章目录matplotlib多组均值和方差图-成功率为例前言：实际效果：前言：虽然主流的强化很少有成功率的柱状图表示，但是在机械臂任务中，还是有不少成功率的展示，因此将这个脚本优化精简分享出来了。供大家参考一下~实际效果：代码：""""@Author : kaixindelele,"@Contact : CSDN: https://blog.csdn.net/hehedadaq;知乎: https://www.zhihu.c

2021-02-21 00:56:57 2528

原创 DDPG-终态done对结果的影响探究

DDPG-终态done对结果的影响探究文章目录DDPG-终态done对结果的影响探究前言：设置分类前言：pass设置分类首先发现了一个重要的问题，在gym中，如果不手动设置env.unwraped，那么它会封装不少信息，比如对于最大回合步数。在fetch系列的环境中，最大回合步数是50，且达到50的时候，会返回done=True,其余的done都是False。这个点，是我在调HER算法的时候，一直没有注意到的。我之前直接debug baselines的代码，发现他们的done是固定在step

2021-02-13 18:20:07 1322 1

原创 pycharm远程连接服务器后添加多个LD_LIBRARY_PATH

pycharm远程连接服务器后添加多个LD_LIBRARY_PATH文章目录pycharm远程连接服务器后添加多个LD_LIBRARY_PATH前言：单个变量：一个LD_LIBRARY_PATH，两个动态链路径：前言：这个破玩意儿耽误我三个小时！之前遇到报错，查了好久，终于搜到关键词。在菜单Run->Edit configurations 中，手动设置Environment variables，添加LD_LIBRARY_PATH的内容，即可解决问题。单个变量：首先看报错信息：Mis

2021-02-01 23:34:24 3466 12

原创基于OpenCV-Python的机器人手眼标定和重投影误差（九点标定法）-附代码

基于OpenCV-Python的机器人手眼标定和重投影（九点标定法）文章目录基于OpenCV-Python的机器人手眼标定和重投影（九点标定法）前言：代码：前言：前一篇转载，写了九点标定的原理。这一篇，就是记录一下，如何标定，以及计算标定参数和重投影精度。我好像没有在中文社区，搜到“九点标定”和“重投影”的相关关键词。但在张正友标定法中，是有一个重投影误差的概念的。即将算出来的变换矩阵M，代入变换公式中，计算出新的目标坐标，和原坐标的的误差。用公式表达即：new_target_pos =

2021-02-01 14:03:44 4733 6

hehedadaq的博客