配置历史服务器
为了查看程序的历史运行情况。
1.配置mapred-site.xml:
[xiaobai@hadoop102 hadoop]$ vim mapred-site.xml
在该文件里增加如下配置:
<configuration>
<!--指定MapReduce程序运行在Yarn上-->
<property>
<name>mapreduce.framework.name</name>
<value>yarn</value>
</property>
<!--历史服务器端地址-->
<property>
<name>mapreduce.jobhistory.address</name>
<value>hadoop102:10020</value>
</property>
<!--历史服务器web端地址-->
<property>
<name>mapreduce.jobhistory.webapp.address</name>
<value>hadoop102:19888</value>
</property>
</configuration>
2). 分发配置:
/opt/module/hadoop-3.2.2/etc/hadoop:
[xiaobai@hadoop102 hadoop]$ xsync mapred-site.xml
3). 在hadoop102启动历史服务器:
–daemen 启动守护进程(后台)
[xiaobai@hadoop102 hadoop-3.2.2]$ bin/mapred --daemon start historyserver
4). 查看历史服务器是否启动:
[xiaobai@hadoop102 hadoop-3.2.2]$ jps
23653 DataNode
29493 JobHistoryServer
29512 Jps
21805 NameNode