Hadoop批处理作业提交问题运行监控--问题解决

1. Slave节点NodeManager启动，但是datanode未启动

首先检查datanode启动节点上hadoop-2.7.2/hdfs/data/current/VERSION中的clusterid是否和namenode同目录下clusterid一致

然后在看storageid是否存在

2. 用Hibench提交作业出现的问题

du: `hdfs://centos35:9000/HiBench/Sort/Input': No such file or directory

本人批量流式sparkstreaming转过来的，所以忽略了一点，批量流式的数据是源源不断到来的，而批处理作业的数据是需要指定数据所在的文件夹，且保证作业提交时文件夹中有数据。

数据发生器启动./prepare后会向系统提交一个产生随机数的作业，这个作业的输出数据即使我们sort文件的输入数据，因此，需要等到随机数作业执行完再提交sort作业。

3. 学会查看log文件，找到问题

由于log文件会很多，这时候可以使用ls --full-time看看每个文件的时间，来确定哪一个才是我们要查看的文件。

4. 监控页面

localhost:8088 yarn

localhost:50070 hdfs

jobhistory节点的端口号：19888可以查看map数

5. 监控信息的获取

可从监控页面看到一些信息，但是还需要从log日志中获取更细节的信息，配置参考https://blog.csdn.net/lisongjia123/article/details/78639058

sbin/mr-jobhistory-daemon.sh start historyserver在namenode节点开启jobhistory服务

日志位置在namenode的hadoop文件夹下logs里存储

或输入指令 ： yarn logs -applicationId application_1542795109277_0004

监控页面端口号：19888

container日志在/data/yarn/logs/jobid/syslog中存储

aggregatelog所在位置是hdfs，不是对应的物理节点位置，hdfs dfs -get /tmp/aggregate-log /home/zc/data拉取到本地

转载于:https://www.cnblogs.com/o-din/p/9991242.html