hadoop yarn日志报错以及如何启动聚合日志

本文档详细介绍了在Hadoop集群中解决YARN日志查看问题的步骤,包括在`yarn-site.xml`和`mapred-site.xml`配置文件中添加日志监控支持,将配置文件同步到集群节点,重启HDFS和YARN服务,以及启动日志监控服务进程,确保能够通过JobHistoryServer查看日志。
摘要由CSDN通过智能技术生成

我们在hadoop集群一般需要在工作台查看日志,但是工作台查看日志一般会出现以下情况:

 

上面的原因是由于yarn的日志监控功能默认是处于关闭状态的,需要我们进行开启,开启步骤如下:

一、在yarn-site.xml文件中添加日志监控支持

该配置中添加下面的配置:

        <!-- 开启日志聚合 -->
        <property>
                <name>yarn.log-aggregation-enable</name>
                <value>true</value>
        </property>
         <!-- 日志时长 -->
        <property>
                <name>yarn.log-aggregation.retain-seconds</name>
                 <value>640800</value>
        </property>
        <property>
                <name>yarn.log.server.url</name>
                <value>http://master:19888/jobhistory/logs/</value&g
  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值