日志服务器搭建及配置_配置历史服务器和日志聚集

为了查看程序的历史运行情况，需要配置一下历史服务器

配置历史服务器

配置mapred-site.xml

Xshell连接hadoop101输入指令：

cd /opt/module/hadoop-2.7.2/etc/hadoop

vim mapred-site.xml.template

在里面添加如下内容

<!-- 历史服务器端地址 -->
<property>
<name>mapreduce.jobhistory.address</name>
<value>hadoop103:10020</value>
</property>
<!-- 历史服务器web地址 -->
<property>
 <name>mapreduce.jobhistory.webapp.address</name>
 <value>hadoop103:19888</value>
</property>
<!--第三方框架使用yarn计算的日志聚集功能 -->
<property>
 <name>yarn.log.server.url</name>
 <value>http://hadoop103:19888/jobhistory/logs</value>
</property>

日志聚集

配置yarn-site.xml

还是在hadoop101的相关目录下

指令：

vim yarn-site.xml

在里面添加以下内容：

<!-- 日志聚集功能使能 -->
<property>
<name>yarn.log-aggregation-enable</name>
<value>true</value>
</property>

<!-- 日志保留时间设置7天 -->
<property>
<name>yarn.log-aggregation.retain-seconds</name>
<value>604800</value>
</property>

启动历史服务器

接下来启动集群

hadoop101：start-dfs.sh

hadoop103：start-yarn.sh

我们刚才在103上配置了历史服务器，现在去hadoop103启动历史服务器

指令：

cd /opt/module/hadoop-2.7.2

mr-jobhistory-daemon.sh start historyserver

查看历史服务器

指令：jps

web查看

http://hadoop103:19888/jobhistory