win10安装maddpg

系统环境

win10、Anaconda3-5.3.1-Windows-x86_64、python3.7.0

第一步，安装tensorflow

1. 在Anaconda Prompt中输入：conda create -n tensorflow
2. 在Anaconda Prompt中输入：activate tensorflow
3. 安装CPU版本tensorflow：pip install -i https://pypi.tuna.tsinghua.edu.cn/simple tensorflow
4. 安装过程中的错误：

• 错误1：Cannot uninstall wrapt，解决方案：pip install wrapt --ignore-installed；
• 错误2：twisted 18.7.0 requires PyHamcrest>=1.9.0, which is not installed.解决方案：pip install PyHamcrest

5. 安装后出现错误：ImportError DLL load failed，Failed to load the native TensorFlow runtime.此时安装 Microsoft Visual C++ Redistributable for Visual Studio 2015, 2017 and 2019 即可正常使用。
6. 测试：命令行下输入python，再输入import tensorflow，没有错误提示即可。
7. 查看tensorflow版本，在Anaconda Prompt中输入：pip show tensorflow
8. anaconda查看环境，在Anaconda Prompt中输入：conda info --envs

第二步，下载MADDPG和MPE

1.解压缩maddpg-master.zip和multiagent-particle-envs-master.zip
2.在maddpg-master文件夹外层目录运行命令pip install -e maddpg-master
3.在multiagent-particle-envs-master文件夹外层目录运行命令pip install -e multiagent-particle-envs-master
4.设置系统环境变量，把multiagent-particle-envs-master所在路径加入系统path中
4.在maddpg的experiments文件夹中运行:python train.py --scenario simple时出错：ImportError: cannot import name ‘prng’ from ‘gym.spaces’。这是gym版本问题，解决方案：pip install gym==0.10.5
5.又出现错误：ModuleNotFoundError: No module named ‘tensorflow.contrib’，解决方案pip install tensorflow==1.14.0
[没注意看，maddpg依赖的环境是: Python (3.5.4), OpenAI gym (0.10.5), tensorflow (1.8.0), numpy (1.14.5)，走了很多弯路。其他没有改，gym改为了0.10.5，tensorflow改为了1.14.0]
6.训练结束，写文件时又出错了：

Traceback (most recent call last):
File “train.py”, line 193, in
train(arglist)
File “train.py”, line 182, in train
rew_file_name = arglist.plots_dir + arglist.exp_name + ‘_rewards.pkl’
TypeError: can only concatenate str (not “NoneType”) to str

解决方案：修改train.py第182行为rew_file_name = str(arglist.plots_dir) + str(arglist.exp_name) + '_rewards.pkl'
第185行为agrew_file_name = str(arglist.plots_dir) + str(arglist.exp_name) + '_agrewards.pkl'

成功!

想要显示图形界面，修改train.py第32行为parser.add_argument("--display", action="store_true", default=True)