MapReduce运行卡住,一直停留在 Running job
问题截图如下:
运行MapReduce然后一直停留在 Running job 这个界面,整个Mr运行不起来,没有数据输出,也没有报任何错误。后面发现可能是虚拟机的内存问题。解决办法如下。
解决办法:
进入到yanr-site.xml这个文件目录,然后vi编辑它,修改里面的虚拟机的内存,把它调大一点就可以,如果你电脑的运行只有4G运行,那就把它调为4G或8G,即4096,这个单位是Mb的,1G=1024Mb ,所以把它调为4096就相当于4G ,依次类推。
[root@hadoop102 ~]# cd /export/servers/hadoop-3.1.2/etc/hadoop/
[root@hadoop102 hadoop]# ll
下面就有那个yarn-site.xml这个文件,然后 vi yarn-site.xml
[root@hadoop102 hadoop]# vi yarn-site.xml
找到<property>
<name>yarn.nodemanager.resource.memory-mb</name>
<value>1024</value>
</property>
<property>
将1024改为4096就可以了,即
<property>
<name>yarn.nodemanager.resource.memory-mb</name>
<value>4096</value>
</property>
<property>
最后记得 重启,然后这个配置生效。三台虚拟机都要这样配置,然后三台全部重启
[root@hadoop102 hadoop]# reboot