【李弘毅深度强化学习】 5.Q-learning (Continuous Action)

Q Learning是一种很好的方法,但是q learning很难处理连续动作的情况。因为q学习是基于值得,如果动作连续,q表太大,则很难计算。

但是凡是问题都有解决的方法,如何解决Q Learning难以应对连续动作得问题呢!

解决方法一:在连续得动作中,我们sample采样出一部分n个,将其变成有限动作的问题。但是这种方法的缺点就是采样不完整,可能会造成以后的问题

解决方法二:我们用梯度增加的方法来使Q值变大,梯度上升,更新参数,但是这样做的缺点使计算量过大。

第三种解决方法:我么设计一个神经网络,可以有三个输出μ(s),Σ(s),V(s),再用矩阵运算的方法将他们算到一起

第四种方法,就是不适用Q Learning,还会有别的方法来解决连续动作的问题。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值