hadoop执行完任务一般有几个地方可以查看:
1、通过本地日志目录查看对应container日志文件,默认在hadoop的安装目录下的/logs/userlogs/:直接用查看文件命该地方的应用运行日志不一定最全,因为任务运行日志由每一个NM产生在本地,然后再给聚合到文件系统中(配置聚合日志功能)。
2、使用命令查看:
[hadoop@hadoop01 ~]$ yarn logs -applicationId application_1523430872525_0002
其中application_1523430872525_0002是任务的编号。
我是用第二种方式查看了任务的log。第一种发现地下没有生成日志文件。