Hadoop的集群搭配

​​​配置的文件和内容

• hadoop.env.sh    配置Hadoop运行所需的环境变量
• yarn.env.sh    配置Yarn运行所需的环境变量
• core-site.xml    Hadoop核心全局配置文件，可在其他配置文件中引用此该文件
• hdfs-site.xml    HDFS配置文件，继承core-site.xml配置文件
• mapred-site.xml    MapReduce配置文件，继承core-site.xml配置文件
• yarn-site.xml    Yarn配置文件，继承core-site.xml配置文件

1.进入该目录下：

 cd /opt/module/hadoop-3.1.4/data/

 cd /opt/module/hadoop-3.1.4/etc/hadoop/

配置Hadoop的主节点：

修改core-site.xml下的内容 在<property><property>标签内书写

修改hdfs-site.xml

修改mapred-site.xml

修改yarn-site.xml

添加works的内容

2.将配置Hadoop主节点的文件分发给slave1和slave2

scp -r /export/software/hadoop-2.4.1 slave1:/export/software/
scp -r /export/software/hadoop-2.4.1 slave2:/export/software/

3.Hadoop的集群测试

1.格式化文件系统

出现successfully就成功了

4.启动和关闭集群

1、在master上启动和关闭

启动：start-dfs.sh
关闭：stop-dfs.sh

2.在slave1上启动和关闭
启动：start-yarn.sh
关闭：stop-yarn.sh
5.验证是否成功    输入jps