hadoop拒绝history通过19888端口连接查看已完成的job的日志

如题如下图所示,hadoop拒绝history通过19888端口连接查看已完成的job的日志,即点击下图的history之后,拒绝通过19888端口连接


原因在于:通过start-all.sh启动hadoop各项节点后,historyserver并没有启动,需要手动启动,因此可以通过以下命令来手动启动historyserver,关闭命令也给出.

启动命令:mr-jobhistory-daemon.sh start historyserver

关闭命令:mr-jobhistory-daemon.sh stop historyserver

但是尽管开启了historyserver,通过上图的Tracking URl也能连接19888,进入到下图所示的界面


但是点击logs仍旧会报错,错误为:Aggregation is not enabled,Try the nodemanager at slave2:43827 Or See application log at http://slave2:43827/node/application/XXXXXXX错误如下图所示:


这是由于没有在yarn中配置日志聚合,在yarn-site.xml文件中增加以下代码,并重启hadoop平台,重新手动打开historyserver即可


再次通过Tracking URL即可访问日志


评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值