主机10020端口连接不上,应该是hadoop集群中datanode访问namenode的10020端口的问题,使用10020端口是jobhistory服务,在检查配置文件mapred-site.xml未发现错误
<property>
<name>mapreduce.jobhistory.address</name>
<value>Master:10020</value>
</property>
<property>
<name>mapreduce.jobhistory.webapp.address</name>
<value>Master:19888</value>
</property>
执行$HADOOP_HOME/sbin/mr-jobhistory-daemon.sh start historyserver
主机10020端口开放
jobhistory的主要功能是记录MapReduce的作业信息,默认情况下是没有启动的,需要配置完后手工启动服务。