action=env.action_space.sample()可以一次选择多个动作吗？

最新推荐文章于 2023-01-12 10:42:55 发布
最新推荐文章于 2023-01-12 10:42:55 发布
阅读量1.9k 收藏
点赞数
分类专栏： 强化学习 OPENAI
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_40433890/article/details/112464730
版权

action=env.action_space.sample()可以一次选择多个动作吗？

九手算法工程师
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
gym库的基本使用方法
CSU干饭人的博客
03-18 3862
gym库的基本使用方法
Q = defaultdict(lambda: np.zeros(env.action_space.n))语句解析
hehedadaq的博客
11-13 1679
Q = defaultdict(lambda: np.zeros(env.action_space.n))语句解析 前言： 再看蒙特卡洛搜索树的代码时，看到了一个Q的初始化定义语句如上形式，一时间没看明白。搜了一下每个部分的含义之后，才知道整句话到底实现了什么功能。 首先后面的部分是非常简单的，env.action_space.n直接是一个动作数目，假设是n，np.zeros()函数也简单，直接创建一个初始值为0的n维数组. 理解default_dict和lambda的作用 难以理解的是那个default_
sample（）采样
Huc673619的博客
10-29 407
1）函数签名 def sample( withReplacement:Boolean, faction:Double, seed:Long=Utils.random.nextLong):RDD[T] //withReplacement:true为有放回的抽样，false为无放回的抽样； //fraction表示：以指定的随机种子随机抽样出数量为fraction的数据； //seed表示：指定随机数生成器种子 2）功能说明 从大量的数据中采样 3）需求说明：创建一个RDD（1-10），从中选择放
解读gym中的action_space和observation_space
热门推荐
JohnJim的博客
05-15 2万+
做强化学习的相关任务时通常需要获取action和observation的数目，但是单智能体和多智能体环境下的action_space等其实是不同的。 先看单智能体环境， print(env.action_space) print(env.observation_space) 打印相关的space，输出如下： Discrete(19) Box(115,) 其中Discrete(19)是action_space，19代表有19个action，它其实是一个类，并且继承一个Space类，所以不可能用n_acti
python 笔记 ：Gym库 （官方文档笔记）
qq_40206371的博客
12-21 1万+
Gym是一个开发和比较强化学习算法的工具箱。它不依赖强化学习算法结构，并且可以使用很多方法对它进行调用。 1 Gym环境 这是一个让某种小游戏运行的简单例子。 这将运行 CartPole-v0 环境实例 1000 个时间步，在每次迭代的时候都会将环境初始化(env.render)。运行之后你将会看到一个经典的推车杆问题 import gym env = gym.make('CartPole-v0') env.reset() for _ in rang...
gym库文档学习（一）
小柴不会敲代码
05-28 3122
最近老板突然让我编写一个自定义的强化学习环境，一头雾水（烦），没办法，硬着头皮啃官方文档咯~ 第一节先学习常用的API： 1 初始化环境 在 Gym 中初始化环境非常简单，可以通过以下方式完成： import gym env = gym.make('CartPole-v0') 2 与环境交互 Gym 实现了经典的“代理环境循环”： 代理在环境中执行一些动作（通常通过将一些控制输入传递给环境，例如电机的扭矩输入）并观察环境状态如何变化。一种这样的动作-观察交换被称为时间步长。 RL
PyPI 官网下载 | gym_super_mario_bros-3.0.4.tar.gz
01-27
action = env.action_space.sample() observation, reward, done, info = env.step(action) if done: print("Episode finished!") break env.close() ``` 在这个例子中，我们创建了一个名为'SuperMarioBros-v0...
PyPI 官网下载 | gym_discrete-1.2.1-py3-none-any.whl
02-09
在每个时间步，智能体执行一个动作，环境会根据该动作返回一个奖励，并转移到下一个状态。gym_discrete库中的环境通常具有明确的目标，如达到最高分数或尽快完成任务，智能体的目标是通过不断试错来最大化长期累积...
yumi-gym:带有小球的协作机器人yumi的Gym env
05-17
瑜珈馆 带有小球的协作机器人yumi的Gym env 特征 链接的碰撞检测 自定义奖励功能 滑块以调整关节角度 ... action_space . sample () observation , reward , done , info = env . step ( action ) 参考
gym-battleship:战舰环境，用于强化学习任务
03-17
env.step(env.action_space.sample()) 观察隐藏的游戏状态： print(env.board_generated) 有效动作 有两种输入动作的方法。 第一种方法是按原样输入元组： env = gym.make('battleship-v0') env.reset
OpenAI python库openai1.14.2安装文件
最新发布
03-21
action = env.action_space.sample() # 采取随机动作 observation, reward, done, info = env.step(action) # 执行动作并获取反馈 if done: print("Episode finished!") break env.close() # 关闭环境 ``` 3...
强化学习笔记1-Python/OpenAI/TensorFlow/ROS-基础知识
zhangrelay的专栏
06-10 2536
概念： 机器学习分支之一强化学习，学习通过与环境交互进行，是一种目标导向的方法。 不告知学习者应采用行为，但其行为对于奖励惩罚，从行为后果学习。 机器人避开障碍物案例： 靠近障碍物-10分，远离障碍物+10分。 智能体自己探索获取优良奖励的各自行为，包括如下步骤： 智能体执行行为与环境交互 行为执行后，智能体从一个状态转移至另一个状态 依据行为获得相应的奖励或惩罚 智能体理解正面...
pytorch笔记：TD3
qq_40206371的博客
07-26 1453
TD3的一些基本配置。
python通俗解释_Python Package：OpenAI Gym通俗理解和简单实战
weixin_39628070的博客
02-04 626
OpenAI Gym为了做实验，发现有文章用OpenAI gym去做些小游戏的控制，主要是为了研究RL的算法，逐渐发现这个gym的例子成了standard test case. 所以，这个blog简单分析下Gym的架构，以及如何安装和使用OpenAI Gym，最后还是附上一个简单的控制案例。0. gym的简介[这部分很简单，请坚持看完]1.Environments & interfaceT...
python笔记 gym Wrapper
qq_40206371的博客
07-13 1656
wrapper
测试gym的cartPole 出错后的更改
insid1out的博客
01-12 5445
gym 版本0.26.2框架下的CartPole-v0运行报错的问题
Gym小记（一）
微念的博客
10-26 1万+
Gym基本用法         本文主要是对Gym的基本用法给出示例代码框架。         下面以小车倒立摆模型"CartPole-v0"为例，进行说明。         首先是采取随机动作： import gym env=gym.make('CartPole-v0') env.reset() for _ in range(1000): env.render()
OpenAI Gym学习
YongqiangGao的专栏
05-10 1万+
观察（Observations）上篇博客介绍了使用OpenAI Gym的CartPole（倒立摆）的demo，如果想要在每个步骤中做出比采取随机行动更好的行动，那么实际了解行动对环境的影响可能会很好。 环境的step 函数返回需要的信息，step 函数返回四个值observation、reward、done、info，下面是具体信息： observation (object):一个与环境相关的对象
ROS2学习笔记（三）-- 采集虚拟仿真环境图像并发布
aibingjin的博客
03-31 3482
​ 简介：ROS2功能的学习我们还是在基于OpenAI的gym虚拟仿真环境中来完成，gym虚拟仿真环境安装请参考另一篇教程，这里不再重复说明，接下来我们开始创建一个ROS2的功能节点，并发布虚拟仿真环境小车摄像头的图像，然后利用rqt工具查看图像。 ​
lr = 2e-3 num_episodes = 500 hidden_dim = 128 gamma = 0.98 epsilon = 0.01 target_update = 10 buffer_size = 10000 minimal_size = 500 batch_size = 64 device = torch.device("cuda") if torch.cuda.is_available() else torch.device( "cpu") env_name = 'CartPole-v1' env = gym.make(env_name) random.seed(0) np.random.seed(0) #env.seed(0) torch.manual_seed(0) replay_buffer = ReplayBuffer(buffer_size) state_dim = env.observation_space.shape[0] action_dim = env.action_space.n agent = DQN(state_dim, hidden_dim, action_dim, lr, gamma, epsilon, target_update, device) return_list = [] episode_return = 0 state = env.reset()[0] done = False while not done: action = agent.take_action(state) next_state, reward, done, _, _ = env.step(action) replay_buffer.add(state, action, reward, next_state, done) state = next_state episode_return += reward # 当buffer数据的数量超过一定值后,才进行Q网络训练 if replay_buffer.size() > minimal_size: b_s, b_a, b_r, b_ns, b_d = replay_buffer.sample(batch_size) transition_dict = { 'states': b_s, 'actions': b_a, 'next_states': b_ns, 'rewards': b_r, 'dones': b_d } agent.update(transition_dict) if agent.count >=200: #运行200步后强行停止 agent.count = 0 break return_list.append(episode_return) episodes_list = list(range(len(return_list))) plt.plot(episodes_list, return_list) plt.xlabel('Episodes') plt.ylabel('Returns') plt.title('DQN on {}'.format(env_name)) plt.show()对上述代码的每一段进行注释，并将其在段落中的作用注释出来
06-12
next_state, reward, done, _, _ = env.step(action) # 环境执行动作，观测下一个状态、奖励和结束标志 replay_buffer.add(state, action, reward, next_state, done) # 将当前状态、动作、奖励、下一个状态和结束...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值