(1)Hadoop系统服务输出的日志
诸如NameNode、DataNode、ResourceManage等系统自带的服务输出来的日志默认是存放在${HADOOP_HOME}/logs目录下。
resourcemanager的日志存放路径可以配置在(在${HADOOP_HOME}/etc/hadoop/yarn-env.sh)中的YARN_LOG_DIR值
默认值:$HADOOP_YARN_HOME/logs
(2) yarn.nodemanager.log-dirs,存放在yarn-site,xml
参数解释:日志存放地址(可配置多个目录)。
默认值:${yarn.log.dir}/userlogs
(3) yarn.nodemanager.local-dirs,存放在yarn-site,xml
参数解释:中间结果存放位置,类似于1.0中的mapred.local.dir。注意,这个参数通常会配置多个目录,已分摊磁盘IO负载。
默认值:${hadoop.tmp.dir}/nm-local-dir
(4)mapreduce.jobhistory.done-dir
参数解释:MR JobHistory Server管理的日志的存放位置。
默认值: /mr-history/done
(5) mapreduce.jobhistory.intermediate-done-dir
参数解释:MapReduce作业产生的历史日志存放位置、主要存放的是当前正在运行的Hadoop任务的记录相关信息。
默认值: /mr-history/tmp