spark on yarn图形化任务监控利器:History-server帮你理解spark的任务执行过程
在spark on yarn任务进行时,大家都指导用4040端口监控(默认是,设置其他或者多个任务同时会递增等例外);辣么,任务结束了,还要看图形化界面,那就要开history-server了。CDH安装spark on yarn的时候,就自动安装了history的实例。现在不用CDH自带的spark(版本太久了),自己安装spark新版,所以还得具体配置。搜了一下帖子,2个步骤:
原创
2015-12-21 10:45:48 ·
11661 阅读 ·
0 评论