本文详细介绍了Hadoop配置文件的关键参数，包括yarn-site.xml、mapred-site.xml、hdfs-site.xml和core-site.xml，涉及ResourceManager、NodeManager、JobHistory Server、NameNode和DataNode等组件的配置，以及日志聚合、权限检查、垃圾回收和JDK路径设置等核心功能。
关于hadoop配置文件
a、yarn-site.xml
<name>yarn.nodemanager.aux-services</name>
<!--NodeManager上运行的附属服务,需配置成mapreduce_shuffle，才可运行MR程序-->
<name>yarn.resourcemanager.hostname</name>
<!--主机名-->
<name>yarn.resourcemanager.address</name>
<!--ResourceManager 对客户端暴露的地址,客户端通过该地址向RM提交应用程序，杀死应用程序等。--> <name>yarn.resourcemanager.scheduler.address</name>
<!--ResourceManager对ApplicationMaster暴露的地址,AM通过该地址向RM申请资源、释放资源等。-->
<name>yarn.resourcemanager.resource-tracker.address</name>
最低0.47元/天 解锁文章
扫一扫
685
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
