环境中的MR与spark的日志聚合服务维护

一、jobhistoryserver服务
首先是配置在hadoop的yarn-site.xml文件中添加如下配置

其次是启动，这个需要再添加这个配置的节点上启动，
jobhistory的启动与停止
启动： 在hadoop/sbin/目录下执行 
./mr-jobhistory-daemon.sh start historyserver
停止：在hadoop/sbin/目录下执行
./mr-jobhistory-daemon.sh stop historyserver
最后是查看验证：node03:19888

这个查看的是MR的任务。

二、historyserver
首先是配置，在spark-defaults.conf配置文件中

配置完之后启动服务，如下,在spark的sbin下，启动spark历史服务器：sbin/start-history-server.sh
最后是查看：