centos7搭建hadoop分布式集群

Hadoop集群节点分配：

s101：namenode节点

s102：datanode节点

s103：datanode节点

s104：datanode节点

s105：secondarynamenode节点

注：s101~s105分别表示5台虚拟机的hostname

前提条件：已经搭建完成hadoop伪分布式集群！

参考文章：https://blog.csdn.net/greatxiaoting/article/details/81562622

1.准备hadoop分布式安装文件

1）进入hadoop安装目录

cd /soft/hadoop/etc

2)复制hadoop文件夹

cp -r hadoop full              //递归复制用于配置分布式hadoop集群

cp -r hadoop pseudo      //递归复制用于备份伪分布式hadoop

rm -rf hadoop                 //删除hadoop文件夹

3）创建分布式hadoop符号链接

ln -s full hadoop             

2.hadoop分布式文件配置

1）进入hadoop配置文件目录

 cd /soft/hadoop/etc/hadoop

2）修改core-site.xml配置文件

<configuration>
  <property>
    <name>fs.defaultFS</name>
    <value>hdfs://s101/</value>
  </property>
  <!--- 配置新的本地目录 -->
  <property>
    <name>hadoop.tmp.dir</name>
    <value>/home/centos/hadoop&