hadoop拒绝history通过19888端口连接查看已完成的job的日志

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/u014326004/article/details/80332126

如题如下图所示,hadoop拒绝history通过19888端口连接查看已完成的job的日志,即点击下图的history之后,拒绝通过19888端口连接


原因在于:通过start-all.sh启动hadoop各项节点后,historyserver并没有启动,需要手动启动,因此可以通过以下命令来手动启动historyserver,关闭命令也给出.

启动命令:mr-jobhistory-daemon.sh start historyserver

关闭命令:mr-jobhistory-daemon.sh stop historyserver

但是尽管开启了historyserver,通过上图的Tracking URl也能连接19888,进入到下图所示的界面


但是点击logs仍旧会报错,错误为:Aggregation is not enabled,Try the nodemanager at slave2:43827 Or See application log at http://slave2:43827/node/application/XXXXXXX错误如下图所示:


这是由于没有在yarn中配置日志聚合,在yarn-site.xml文件中增加以下代码,并重启hadoop平台,重新手动打开historyserver即可


再次通过Tracking URL即可访问日志


阅读更多
想对作者说点什么?

博主推荐

换一批

没有更多推荐了,返回首页