自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(25)
  • 收藏
  • 关注

原创 深度强化学习:PPO + AI2THOR问题总结

一、PPO代码选用的是如下repo中的PPO代码:https://github.com/MorvanZhou/Reinforcement-learning-with-tensorflow/tree/master/contents/二、网络结构1.网络变量项目中的网络输入针对的是向量,但AI2THOR环境下的观测状态及神经网络需要的输入是一个三维张量,因此需要修改项目中的网路结构,S为[None, 84, 84, 3],Q_tar为[None, 1],Q_eval为[None, 1],pi

2021-01-27 16:43:16 769

原创 深度强化学习:(七)PPO

一、PPO

2021-01-27 16:42:23 1229

原创 深度强化学习:(六)DDPG

一、Deep Deterministic Policy Gradient

2021-01-27 16:42:12 248

原创 深度强化学习:(五)Actor Critic

一、Actor Critic算法

2021-01-27 16:41:57 344

原创 深度强化学习:(四)Policy Gradient

1、Policy Gradient算法

2021-01-27 16:41:45 204

原创 深度强化学习:(三)DQN

1、DQN算法

2021-01-27 16:41:31 264

原创 深度强化学习:(二)Q-learning(off-policy) 和 Sarsa(on-policy)比较

一、Q-learning1.Q-learning算法2.Q-learning 动作策略——E-greedy3.Q-learning评估策略——greedy不需要用到a’,直接取Q表中s’所对应q值最大的二、Sarsa1.Sarsa算法2.Sarsa 动作策略——E-greedy3.Sarsa评估策略——E-greedy在s’下,根...

2021-01-27 16:41:10 883

原创 深度强化学习:(一)马尔科夫决策过程

一、马尔科夫决策过程

2021-01-27 16:40:23 800

原创 深度强化学习:Unreal + AI2-THOR问题总结

1.multiprocessing多进程Pipe进程间通信https://blog.csdn.net/brucewong0516/article/details/857960732.INVALIDARGUMENTERROR (SEE ABOVE FOR TRACEBACK): ASSIGN REQUIRES SHAPES OF BOTH TENSORS TO MATCH. LHS SHAP...

2021-01-27 16:39:23 1356

原创 Unuty3D开发ai2thor

一、Edit用Uinity3D打开ai2thor/unity项目进行编辑二、Build方法一:1.修改ai2thor目录下的task.py文件,注释86-89行,并添加一行Unity3D软件的路径#if os.path.exists(standalone_path):# unity_path = standalone_path#else:# unity_pa...

2020-03-14 16:21:47 848 2

原创 Tensorflow报错: ASSIGN REQUIRES SHAPES OF BOTH TENSORS TO MATCH.LHS SHAPE= [256,3] RHS SHAPE= [256,6]

INVALIDARGUMENTERROR(SEE ABOVE FOR TRACEBACK): ASSIGN REQUIRES SHAPES OF BOTH TENSORS TO MATCH.LHS SHAPE = [256, 3] RHS SHAPE = [256, 6]运行Tensorflow项目时报错,解决办法:第一、确定修改后的网络输入shape和你输入的图片shape是符合的第...

2020-01-03 11:22:41 951

原创 使用G2O库时编译错误

编译时出现如下错误:CMake Error at CMakeLists.txt:11 (find_package):By not providing "FindG2O.cmake" in CMAKE_MODULE_PATH this project hasasked CMake to find a package configuration file provided by "G2O"...

2019-04-16 20:29:05 768

转载 g2o架构

g2o的整体结构说到整体的结构,不得不用一张比较概括的图来说明:这张图最好跟着画一下,这样能更好的理解和掌握,例如我第一次看的时候根本没有注意说箭头的类型等等的细节。那么从图中我们其实比较容易的就看出来整个库里面较为重要的类之间的继承以及包含关系,也可以看出整个框架里面最重要的东西就是SparseOptimizer这个类(或者说实例)。顶点(Vertex)和边(Edge)顺...

2019-04-07 14:46:25 388

转载 运行Pangolin时提示以下错误: terminate called after throwing an instance of 'std::runtime_error'

在运行Pangolin时提示以下错误:terminate called after throwing an instance of 'std::runtime_error'what(): Pangolin X11: Unable to retrieve framebuffer options解决方法:cd Pangolin\src\display\devicesudo gedi...

2019-04-02 20:44:10 3047 1

转载 Ubuntu14.04安装CMake

1.wget https://cmake.org/files/v3.3/cmake-3.3.2.tar.gz ,解压文件tar -xvf cmake-3.3.2.tar.gz2.检测gcc和g++是否安装,如果没有则需安装gcc-g++:sudo apt-get install build-essential(或者直接执行这两条命令sudo apt-get install gcc,sudo a...

2019-03-31 16:50:17 478

转载 ubuntu16.04下安装kdevelop和汉化

1、Kdevelop安装最简单的命令行安装,打开终端,执行1sudo apt-getinstall kdevelop2、Kdevelop汉化不需要自己下载汉化包,Kdevelop安装后,在终端执行aptitudesearchkdevelop 会提示aptitude未安装,通过以下命令安装1sudo apt-getinstall aptitude2apt...

2019-03-29 15:05:11 431

转载 E:未发现软件包 Kdevelop

执行操作:sudo apt-get updatesudo apt-get install kdevelop

2019-03-29 15:02:32 630

原创 pip install tensorflow超时异常

在win10下安装Anaconda后安装TensorFlow:pip install tensoflow报错如下:Retrying (Retry(total=4, connect=None, read=None, redirect=None)) after connection broken by 'ConnectTimeoutError(<pip._vendor.requests....

2019-02-02 22:58:36 4489

转载 解决cookie跨域访问

https://www.cnblogs.com/hujunzheng/p/5744755.htmlhttps://www.cnblogs.com/helloworldcode/p/6023003.html 

2019-01-13 21:31:36 710

转载 C++之private虚函数

一般我们说虚函数,它的访问级别都是public的,用类对象可以直接调用,这样就可以实现运行时的类型绑定,那如果我们将虚函数私有化会出现什么情况呢?我们先来看一个非虚函数私有化的例子class Base{private: void PrintClassName () { cout<<"Base"<<endl; }publ...

2018-09-16 23:40:04 2200

转载 No parameters defined during prepareCall()

语句如下: SELECT * FROM TEST WHERE TEST_NAME LIKE '%?%'修改成SELECT * FROM TEST WHERE TEST_NAME LIKE CONCAT('%',?,'%')即可concat(var1,var2,.....)mysql中特有的拼接字符串的方式

2018-06-30 19:28:39 1458

转载 $.ajax()方法从服务器获取json数据

一.什么是jsonjson是一种取代xml的数据结构,和xml相比,它更小巧但描述能力却很强,网络传输数据使用流量更少,速度更快。json就是一串字符串,使用下面的符号标注。{键值对} : json对象[{},{},{}] :json数组"" :双引号内是属性或值: :冒号前为键,后为值(这个值可以是基本数据类型的值,也可以是数组或对象),所以 {"age": 18} 可以理解为是一个包含age为...

2018-04-04 12:45:36 874

转载 mysql 1045 错误解决办法

ERROR 1045 (28000): Access denied for user 'ODBC'@'localhost' (using password: NO)ERROR 1045 (28000): Access denied for user 'ODBC'@'localhost' (using password: YES)windows下,以上两个错误的解决方法1、找到配置文件my.ini ...

2018-03-31 21:10:01 2121

原创 服务列表里的MySQL消失的解决方案

第一步:点击开始--输入cmd--右键cmd.exe--以管理员身份运行第二步:切换到你的mysql的安装目录下的bin目录,执行mysqld.exe  --install命令,看到              service successfully installed .表示安装服务成功。第三步:进到Windows的服务列表,MySQL服务便又出现了此时即可开启服务。...

2018-03-31 20:35:27 472

原创 SSH整合报错:org.hibernate.hql.ast.QuerySyntaxException: userinfo is not mapped [from userinfo]

报错信息:org.hibernate.hql.ast.QuerySyntaxException: userinfo is not mapped [from userinfo]可能原因:1.Userinfo.hbm.xml配置文件没有加载到hibernate.cfg.xml的实体列表里面2.Userinfo.hbm.xml配置文件文件的字段与数据库字段不一致,或者名称不一致导致3.HQL语句不正确 ...

2018-03-31 20:34:42 335

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除