深度强化学习(DRL)

深度强化学习(DRL)是深度学习和强化学习的结合,克服了两者单独的局限性。强化学习基于马尔可夫决策过程(MDP),通过奖惩机制寻找最优策略。DRL通过引入深度神经网络解决Q-learning的泛化问题,采用经验回放和分离目标网络以提高稳定性。主要方法包括基于值函数、基于策略梯度和基于多agent的DRL,其中DQN是一种常用的技术。
摘要由CSDN通过智能技术生成

DRL形成背景

深度强化学习(Deep Reinforcement Learning)顾名思义,是深度学习与强化学习的结合,因此深度强化学习弥补了DL和RL的不足之处。

  • 深度学习最近火热,大家也都有所了解,就是通过多层网络和非线性变换,去学习数据的分布式特征表示,因此深度学习侧重于对事物的感知和表达。
  • 而强化学习,了解的同学都知道,通过奖惩机制去挖掘最优策略,因此它侧重于学习解决问题的策略。

因此由于深度学习特征感知能力强却缺乏决策能力,引入了深度强化学习这个概念。

强化学习

要了解深度强化学习,首先要了解强化学习这个概念,接下来就简单介绍一下强化学习的基础知识。

强化学习是从环境状态到动作空间的映射的一种学习。它的基础是马尔可夫决策过程(MDP),即:当前状态只与上一个状态有关,不考虑上一个状态之前的累积影响。

通常MDP被定义为一个四元组(S,A,R,P):

  • S代表状态空间,St表示agent在t时刻所处的状态。
  • A代表动作空间,at表死agent在t时刻所进行的动作。
  • R代表奖励/惩罚reward,可以代表一个学习过程的反馈,其中rt+1代表在t时刻St状态下,做出at动作后,转移到达St+1状态所获得的奖励。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值