yarn日志查看的3种方法

YARN

yarn日志查看的3种方法

一、在yarn的开源web上查询相关任务运行情况
（如果任务异常退出，可能会看不到）

二、yarn命令查看(用户要和提交任务的用户一致）

#显示所有yarn的任务
yarn application -list -appStates ALL
#显示完成的任务
yarn application -list -appStates FINISHED
#筛选的字段
ALL,NEW,NEW_SAVING,SUBMITTED,ACCEPTED,RUNNING,FINISHED,FAILED,KILLED
#查看指定任务日志
yarn logs -applicationId application_id(任务application)

三、hdfs路径的log直接查看
1）查看yarn-site.xml，确定log配置目录

yarn.nodemanager.remote-app-log-dir /app-logs ...

2）查看日志文件信息（注意日期和时间）
[hdfs@node1 root]$ hdfs dfs -ls /app-logs/hdfs/logs
Found 1 items
drwxrwx— - hdfs hadoop 0 2017-05-02 04:18 /app-logs/hdfs/logs/application_149370089222_0001

3）查看日志详情（注意查看节点重启前的几个敏感app）
yarn logs -applicationId application_149370089222_0001