参考:https://blog.csdn.net/u013429010/article/details/82983708
目录
hadoop中有几个比较重要的xml配置文件,如下图中绿色的高亮文件所示:
core-site.xml
1. 指定namenode的地址,就是如下页面的地址:
2. 用来指定使用hadoop时产生文件的存放目录
3. 用来设置检查点备份日志的最长时间
hdfs-site.xml
1. 指定hdfs保存数据的副本数量
2. 指定hdfs中namenode的存储位置
3. 指定hdfs中datanode的存储位置
mapred-site.xml
mapred是map reduce的缩写,这个配置主要是告诉hadoop以后MR(Map/Reduce)运行在YARN上。
yarn-site.xml
yarn-site.xml里有一个比较重要的配置,yarn的log文件存放目录就是在这个文件设置的。如果没有这个目录,是看不了yarn的log的。
注意,这个目录是指hdfs上的/tmp,不是本地的/tmp。
设置了这个文件后,再以yarn方式提交程序后,就能在hdfs上查看到log的目录:
hive-site.xml
还有一个hive-site.xml在/usr/local/hive/conf下,这里边配置了hive的元数据服务