如何解决Yarn管理页面的ApplicationHistory / History无法跳转到指定页面的问题

最新推荐文章于 2024-08-12 03:12:12 发布

江湖侠客

最新推荐文章于 2024-08-12 03:12:12 发布

阅读量2.2k

点赞数

分类专栏： bug问题库【初学】

本文链接：https://blog.csdn.net/weixin_39868387/article/details/103883437

版权

bug问题库【初学】专栏收录该内容

15 篇文章 1 订阅

订阅专栏

如何解决Yarn管理页面的ApplicationHistory / History无法跳转到指定页面的问题
在这里插入图片描述
分析原因：需要配置hostory！

解决方案
在mapred-site.xml中加入如下配置：

<!-- 指定MR运行在YARN上 -->
<property>
        <name>mapreduce.framework.name</name>
        <value>yarn</value>
</property>

         <property>
        <name>mapreduce.jobhistory.address</name>

       <value>hadoop101:10020</value>
     </property>

     <property>
        <name>mapreduce.jobhistory.webapp.address</name>
        <value>hadoop101:19888</value>
     </property>
     <property>
        <name>mapreduce.jobhistory.done-dir</name>
        <value>/history/done</value>
     </property>
     <property>
        <name>mapreudce.jobhistory.intermediate.done-dir</name>
        <value>/history/done/done_intermediate</value>
     </property>

在这里插入图片描述

之后，在在yarn-site.xml文件中添加如下内容：


     <!-- Site specific YARN configuration properties -->
<!-- Reducer获取数据的方式 -->
<property>
        <name>yarn.nodemanager.aux-services</name>
        <value>mapreduce_shuffle</value>
</property>

<!-- 指定YARN的ResourceManager的地址 -->
<property>
<name>yarn.resourcemanager.hostname</name>
<value>192.168.219.101</value>
</property>

        <property>
                <name>yarn.log-aggregation-enable</name>
                <value>true</value>
        </property>

在这里插入图片描述
当我们配置完成后,需要启动日志(历史)服务器,启动地址在如下目录

接下来，需要启动它，启动命令如下:

[root@hadoop101 hadoop]# mr-jobhistory-daemon.sh start historyserver

starting historyserver, logging to /usr/local/hadoop/module/hadoop-2.7.2/logs/mapred-root-historyserver-hadoop101.out

查看进程

[root@hadoop101 hadoop]# jps
20464 NameNode
21184 NodeManager
22144 ApplicationHistoryServer
22291 JobHistoryServer
22324 Jps
20741 SecondaryNameNode
20901 ResourceManager
20559 DataNode