Hadoop的集群部署

（1），Hadoop的部署

一，JDK的安装与配置

1，把安装包放进 /opt 目录下

输入命令: tar -zxvf jdk-8u162-linux-x64.tar.gz -C /opt 解压文件。还是放在 /opt 目录下

执行命令：vim /etc/profile，配置环境变量

存盘退出，执行命令：source /etc/profile，让配置生效

查看jdk版本 java -version

为了解决问题，需要执行命令：yum -y install glibc.i686 我觉这个没有问题

编写一个java 程序 vim Helloword.java

然后编译运行

2，将JDK 分发给slave1和slave2

输入命令: scp -r $JAV{A}_{H}OMEroot@slave1:$JAVA_HOME

在slave1 虚拟机上查看JDK是否拷贝成功，

在slave2 虚拟机上查看是否已经拷贝成功

3，将环境配置文件分发到slave1,slave2虚拟机上

输入命令: scp /etc/profile root@slave1:/etc 分发到slave1 上

输入命令: scp /etc/profile root@slave2:/etc 分发到slave2 上

在slave1与slave2虚拟机上执行命令：source /etc/profile，让环境配置生效


在slave上面查看JKD 的版本

将主节点上的Java程序HelloWorld.java分发到slave1节点，然后编译执行

二，Hadoop 的安装

1，安装Hadoop的安装包

下载链接: https://www.apache.org/dyn/closer.cgi/hadoop/common/hadoop-3.3.4/hadoop-3.3.4.tar.gz
还是放在/opt 目录下

查看上传的 Hadoop 安装包

2，将Hadoop 安装包解压到指定目录

还是解压到 /opt 目录下

在配置Hadoop时，常用的就是bin、etc与sbin三个目录
查看bin目录

查看 ll /opt/hadoop-3.3.4/etc/hadoop 目录

查看sbin 目录

3，配置Hadoop 环境变量

执行命令 vim /etc/profile 添加这些，路径是在opt下面不能写错了

存盘退出，执行命令source /etc/profile，让配置生效

4，验证Hadoop 环境

执行命令：hadoop version，检查Hadoop安装是否成功