【RES（MPE）】Regularized Softmax Deep Multi-Agent Q-Learning论文项目调试记录

文章：Regularized Softmax Deep Multi-Agent Q-Learning
项目：https://github.com/ling-pan/RES
本地未安装smac，只调试mpe环境

1、一大堆导包错误，明明有文件，路径也没错，就是没导进来，如图：

解决：

from src.envs import REGISTRY as env_REGISTRY

from src.components.episode_buffer import EpisodeBatch

猜想是因为二者的共同根目录是src的原因（单独设置RES为sources root无效）

2、缺少Variable引用提示：Unresolved reference 'Variable'

解决：

Variable是torch模块中的一个函数，项目中只引用了torch，添加：
from torch.autograd import Variable

3、AttributeError： 'World' object has no attribute 'scenario_name'

这个大概是命令行的问题？有点搞不懂。main函数中第一个语句params = deepcopy(sys.argv)；作用是获取输入的命令行参数，并且把它们分割开。
比如python3 src/main.py --config=res_qmix --env-config=mpe_env ，会被分成python3 src/main.py，--config=res_qmix，--env-config=mpe_env几部分
作者项目中给的命令格式在这个函数中会变成字符串python3 src/main.py与“–env_config”做对比，实际python3 src/main.py是不需要的
解决：

（1）删除该语句，直接把参数在文件中写好：
params = deepcopy(['--env-config=mpe_env','--config=res_qmix','simple_world'])
（2）在配置中添加参数：
“ 需要在Run(U) -> edit Configurations(R) -> 添加命令行需要输入的参数，不需要开头的python src/main.py ” 

4、GitHub issues中提到了 “ 项目原目录src/envs/multiagent-particle-envs/multiagent/少了一个文件multi-discrete.py，在mpe环境的里面有这个文件 ”，需要自己拖进去，否则会提示缺参

5、TypeError: can't convert cuda:0 device type tensor to numpy. Use Tensor.cpu() to copy the tensor to host memory first.

解决：

将_tersor文件中的return self.numpy()
改为
return self.cpu().detach().numpy()
（pycharm里没办法直接改，就从源文件里管理员打开更改）

————————————————————————————————
运行截图：

。。黄字部分不知道是否存在问题，继续看