博主在学习的过程中也遇到了众多问题,这里是全流程可以实现MADDPG跑通simple的教程,后续可能出一个遇到的问题及解决方案全集。
准备工作
官网下载MPE和MADDPG代码,解压缩,要记得自己放的位置,后续要使用。
MPE:https://github.com/openai/multiagent-particle-envs
MADDPG:https://github.com/openai/maddpg
一、Anaconda下载
1.安装
下载官网:Anaconda | The World’s Most Popular Data Science Platform
安装教程参考:
Win10+Anaconda3 的详细安装教程(图文并茂)_anaconda安装教程-CSDN博客
下载后win+R后输入cmd进入系统命令行输入conda -V可以查看版本(掌握一下使用命令行)
2.adaconda虚拟环境的创建和虚拟环境python版本更改
MADDPG要求的python版本较低,最新下载Anaconda自带的python版本较高,可以创建一个虚拟环境后更改虚拟环境的python版本,maddpg要求的python版本是3.6.5。此处任意一个例子
conda create -n example python=3.6.5
没有python3.6.5话会自动下载 。Y/N输入y点击enter键即可
二、创建满足MADDPG运行的虚拟环境
接上文创建的环境,首先要激活环境。
conda activate example
虚拟环境激活以后进行配置
pip install tensorflow==1.8.0 -i https://pypi.tuna.tsinghua.edu.cn/simple
pip install numpy==1.14.5 -i https://pypi.tuna.tsinghua.edu.cn/simple
install gym==0.10.5 -i https://pypi.tuna.tsinghua.edu.cn/simple
安装tensorflow:pip install tensorflow==1.8.0 -i https://pypi.tuna.tsinghua.edu.cn/simple
安装numpy:pip install numpy==1.14.5 -i https://pypi.tuna.tsinghua.edu.cn/simple
安装gym:pip install gym==0.10.5 -i https://pypi.tuna.tsinghua.edu.cn/simple
三、MPE的配置(在example环境中)
很重要很重要!!!!在建立的虚拟环境中操作。
转到目录:(根据自己的目录)
cd /d D:\MPE\multiagent-particle-envs-master
安装MPE:-e 后面是路径
pip install -e D:\MPE\multiagent-particle-envs-master
转到bin文件夹
cd D:\MPE\multiagent-particle-envs-master\bin
运行interactive.py
python interactive.py
出现如下不用管,按ENTER键
报错,因为pyglet版本不对,换成1.2.4版本
pip install pyglet==1.2.4
再次运行:方法同上,代码+遇到提示按enter
四、MADDPG配置和运行(在example环境中)
接下来是MADDPG安装,方法同MPE
安装好了重要一点将MPE的multiagent文件夹复制到MADDPG这边
目录转到experiments
cd /d D:\MADDPG\maddpg-master\experiments
输入代码;
python train.py --scenario simple
同样提示按enter就行
成功了,要是需要可视化,可以修改train.py文件display的deflaut值为Ture
再次运行:同上的操作,每次要按enter就是
假如换另外的simple运行
python train.py --scenario simple_world_comm
报错:
解决办法:
删除tmp文件夹中policy中的所有文件,然后将display的deflaut改为false再运行
成功了,其实在pytharm更简单,后续有空更新在pycharm中,和最近学习的MACa环境的配置。
未完待续
参考文章:
Win10+Open AI +MADDPG环境配置详细终结版_win10 如何设置配置openai_prox-CSDN博客