学着使用HFO

环境是配完了，但是也不一定会用hhh

我摸索了一阵，记录一下。

首先运行一个demo，关于两个player之间传球的.sh文件：

./example/passing_agents.sh

记得要在HFO主目录下运行哦，这个意思就是运行HFO/example/ 目录下的passing_agents.sh文件，你去目录下看看还真有！打开看看，就很简单的几行代码。运行结果就是两个小人一直在传球。

然后我注意到example目录下还有很多.sh文件，这些都是可以运行的，内容就是他文件名标注的。比如说我又运行了一个defense_2v2.sh文件。但是这次报错了，说没有这个文件。

原来，我打开这个文件一看，第一行是这样的：

# HAS TO BE RUN FROM EXAMPLE DIR DUE TO hand_coded_defense_agent CONFIG!

就是说，要在example目录下运行才行，于是就跑到example下打开终端：

然后稍等一会等他连接上服务器，就会唰得出现一串的代码，告诉你进了多少球，defense capture的是多少……可是过程呢？？我要过程！！

然后我就想起来刚才阅读手册的时候看到的。原来，这个.sh文件中有一行指令，安排了运行的方法，包括启不启用visualizer，sync模式开不开。

../bin/HFO --offense-npcs=2 --defense-agents=1 --defense-npcs=1 --trials 20 --headless --port=7000 &

headless就是不开界面的意思，想要看动画把这个删掉就好。然后再加上–no-sync，关闭sync，就可以得到常速动画了。

忍不住啰嗦一下，看手册啊看手册，就当练习阅读了。

论文：文献

连接server

然后我尝试了这个指令：

(./bin/HFO --offense-agents=1 --no-sync &) && ./example/hfo_example_agent

不知道为什么就很不对，马上就显示server down了。那还是分开吧

./bin/HFO --offense-agents=1 --no-sync &

然后再输入

./example/hfo_example_agent

就能看到一个player缓慢的向右移动了。因为这个hfo_example_agent的代码就是让他缓慢的向右移动。

与之类似，如果最后输入的是mid_level_move_agent，就会看到小人无头无脑的移动；mid_level_dribble_agent是带球移动；mid_level_kick_agent是可以进球的。
然后high_level_random_agent 既能运球也能踢球。去看了一眼他的代码，看到他在选择动作的时候是随机的，能踢球的时候（state[5]==1）各有50%的概率选择踢球或者dribble。

.sh文件

我查了一下.sh文件，原来是脚本文件，也就是一个命令包，存放了在终端进行的操作以及顺序。这样的话，我能不能按照.sh文件里面的顺序，手动实现呢？
结果我试了一下defense_2v2.sh这个文件，手动实现和直接运行脚本文件是不同的……手动时就只有一个defense-player？？？

为什么会少一个呢？？？
难受

明天在看看吧，再不写作业就要挂了……

使用.sh

我今晚又试了试，今中午的时候我直接运行.sh文件，出来的小人总是少了一个，然后我现在发现，是因为我没有等到程序连接好就手动开始了。所以说，一定不要着急，多等一会会儿。

然后我又去尝试用终端手动执行指令，还是不行，连不上，npc之外的player还是出不来。

🏇的，刚刚发现原论文的dqn代码是用c++写的……绝望……

好的，又去咨询了原作者，解决了这个运行问题。

I would recommend using two separate terminal windows. In the first launch the server:
./bin/HFO --offense-npcs=2 --defense-agents=1 --defense-npcs=1 --trials 20 --no-sync --port=7000

Then in the second window, launch the agent:
./hand_coded_defense_agent > agent1.txt

太感人了，终于解决了。看来我对于linux的终端操作还是了解的太少了鸭。

anaconda环境下运行

在anaconda环境下试试。
因为我在安装anaconda环境的时候没有自动添加环境变量，所以手动添加一下：
参考Linux环境下添加环境变量，Linux下anaconda环境变量设置

export PATH="/home/monnie/anaconda3/bin:$PATH"

就跳到anaconda环境下了。检查一下，看看这时python的版本是3.7.6，已经不是默认的3.6了，很好。
然后在跳到HFO目录下，运行一个脚本文件，就能运行成功了。

sarsa agent

我发现目录下还有sarsa 的agent，但是经过尝试后，运行不出来……
刚以为是没有make的原因，但是make了之后还是不行……

我有发现example目录下有python_agent.sh，打开一看是直接用.py文件连接的。但是sarsa还是不行。

然后他报错是

说这个文件打不开……这个文件明明能在这个目录下找到的……