CentOS7下搭建hadoop分布式平台【适合新手系列2】

为了在linux虚拟机上搭建hadoop平台，我们先要安装jdk，详细步骤如下：
安装jdk1.8配置环境变量
1、 查看是否安装过jdk，若虚拟机没有java则跳转至第三步

rpm -qa | grep java

2、删除旧的jdk软件

rpm -e --nodeps 所要删除的jdk名称

3、通过 mkdir java 命令 在任意目录下创建一个名为 java 的目录

mkdir java

4、使用 rz 命令上传jdk压缩包至虚拟机

rz

5、通过 ll 命令查看一下当前目录下的目录结构，出现了名为 jdk-8u171-linux-x64.tar.gz 的 tar 包，通过 tar -zxvf 压缩包名称 解压 tar 包；

解压完成后：

6、cd进入jdk1.8.0_171文件夹中，通过 pwd 命令显示当前目录，要把当前目录复制一下，因为一会要配置环境变量。

7、通过 vi /etc/profile 命令来编辑环境变量的配置文件（图像化界面将vi替换为vim）

vi /etc/profile

8、在文档最后写入以下内容，JAVA_HOME 的值就是刚刚用 pwd 命令显示的当前目录的路径

export JAVA_HOME=/usr/local/java/jdk1.8.0_171
export CLASSPATH=.:$JAVA_HOME/lib.tools.jar
export PATH=$JAVA_HOME/bin:$PATH

如图：

9、通过 source /etc/profile 命令使更改的配置立即生效

source /etc/profile

10、通过 java -version 命令和 javac -version 命令来查看 jdk 是否安装成功

java -version

 javac -version

好勒，现在jdk安装成功了，现在我们来安装hadoop

安装hadoop并配置环境变量，搭建集群

1、永久关闭防火墙

先查看防火墙状态

systemctl status firewalld.service

如果还在运行则关闭防火墙

systemctl stop firewalld.service

禁用防火墙

systemctl disable firewalld.service

如图：
2、将hadoop_2.7.1传至虚拟机中 ，如果没有xftp等上传文件的软件就还是用还是 rz 命令

然后：

（1）找到一个合适的位置创建hadoop文件夹：mkdir hadoop

（1）tar -zxvf 压缩包名称 //解压文件

（2）进入下载后的hadoop文件夹，通过 pwd 命令显示当前目录，并复制一下，稍后配置hadoop的环境变量时可能会用到。

3、vi /etc/profile 命令来编辑环境变量的配置文件，模仿下面的代码添加hadoop的环境变量（注意PATH，要在java的环境变量的基础上写hadoop）
PS：这里HADOOP_HOME的路径可以粘贴刚刚在装完hadoop后pwd显示的路径

vi /etc/profile 

export HADOOP_HOME=/usr/local/hadoop/hadoop-2.7.1
export HADOOP_LOG_DIR=/usr/local/hadoop/hadoop-2.7.1/logs
export YARN_LOG_DIR=$HADOOP_LOG_DIR
export PATH=.:$HADOOP_HOME/sbin:$HADOOP_HOME/bin:$JAVA_HOME/bin:$PATH

4、更新环境变量

source /etc/profile

cd 到bin目录下输入hadoop，查看提示信息