在模拟环境下Hadoop的Master机器搭建

最新推荐文章于 2024-01-04 21:22:00 发布

上世代真实人类

最新推荐文章于 2024-01-04 21:22:00 发布

阅读量1.1k

点赞数

文章标签： hadoop

本文链接：https://blog.csdn.net/weixin_55220720/article/details/121556425

版权

以下代码皆是集百家之长，只为提供简洁的解决方案之一

core-site.xml

<configuration>
   <property>
       <name>fs.defaultFS</name>
       <value>hdfs://master:*</value>
   </property>
   <property>
       <name>hadoop.tmp.dir</name>hadoop文档地址
       <value>*</value>
   </property>
   <property>
       <name>hadoop.proxyuser.root.hosts</name>
       <value>*</value>
    </property>
   <property>
       <name>hadoop.proxyuser.root.groups</name>
       <value>*</value>
   </property>
</configuration>

hdfs-site.xml

<configuration>
   <property>
       <name>dfs.replication</name>
       <value>僚机数量</value>
   </property>
   <property>
       <name>dfs.namenode.name.dir</name>namenode文档地址
       <value>file:*</value>
   </property>
   <property>
       <name>dfs.datanode.data.dir</name>datanode文档地址
       <value>file:*</value>
   </property>
   <property>
       <name>dfs.secondary.http.address</name>
       <value>slave1:*</value>
   </property>
   <property>
       <name>dfs.permissions</name>
       <value>false</value>
   </property>
</configuration>

mapred-site.xml

<configuration>
   <property>
       <name>mapreduce.framework.name</name>
       <value>yarn</value>
   </property>
</configuration>

yarn-site.xml

<configuration>
   <property>
       <name>yarn.resourcemanager.hostname</name>
       <value>master</value>
   </property>
   <property>
       <name>yarn.nodemanager.aux-services</name>
       <value>mapreduce_shuffle</value>
   </property>
   <property>
       <name>yarn.resourcemanager.webapp.address</name>
       <value>master:*</value>
   </property>
</configuration>