PADDLE②-③Q-learning算法。on/off policy差别

本文深入探讨了Q-learning算法,这是一种离策略的强化学习方法。与SARSA的on-policy策略不同,Q-learning使用ε-greedy策略进行行动选择,而在更新Q表时采用贪婪策略。核心思想是平衡当前奖励与未来潜在奖励。通过Q-table进行状态-动作值的更新,并通过伪代码和实际应用示例展示了Q-learning的工作流程。同时,文章对比了Q-learning与SARSA的主要区别,指出Q-learning无需知道下一步具体动作,直接按照最优策略更新。
摘要由CSDN通过智能技术生成

Ⅰ:Q Learning

  1. Learning是Value-Based的强化学习算法强化学习五个部分为:Agent(智能体)Environment(环境)State(状态)Action(行动)Reward(奖励)而Q算法的额外在于他的统计方式-Q表格(矩阵)Q-Value(State, Action)

Q-Learning是off-policy的,因为它的行动策略和评估策略不是一个策略。这也是它跟SARSA的一个差别,SARSA是on-policy。差别为:

Q-Learning中每次采取Action的行动策略是ε-greedy策略,而在学习更新Q表的时候使用的评估策略是

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值