Hadoop集群搭建及docker安装

目录

前言

一：首先将VMware以及所需的XShell，Xftp安装完成

二：在VMware虚拟机中安装CentOS 7

三.配置Centos7

四.克隆虚拟机，配置主机，搭建集群

五、用Xshell连接三台虚拟机

六.配置Hadoop

七.启动Hadoop集群

八.mapreduce示例

九.安装docker

---

---

---

前言

    这是我第一次搭建hadoop，也参考了很多的博主的文章才搭建完成，以下是我的安装步骤。

一：首先将VMware以及所需的XShell，Xftp安装完成

       上述软件到官网下载即可。

二：在VMware虚拟机中安装CentOS 7

1. 下载需要的镜像文件CentOS-7-x86_64-Minimal-2009.iso，最好的选用清华的镜像源。
2. 打开VMware创建新的虚拟机，在安装程序光盘映像文件中选用我们之前下载好的镜像文件。
3. 安装位置和大小自行选择，一直点击下一步。
4. 安装语言选择简体中文。
5. 点击安装位置，选择本地标准磁盘后点击完成。
6. 
7. 点击网络和主机名进行配置（该图片中的内容后面需要，建议截图）

8.点击配置，然后点击IPV4设置，将方法改为手动，然后点击Add添加地址，子网掩码和网关也就是上图中的内容。DNS用的是阿里的DNS223.5.5.5,223.6.6.6，然后勾选IPv4点击保存 

9.保存后可以更改主机名，我这里将其设置为localhost。

10.点击开始安装，点击设置ROOT密码，这里设置为了123456。

11.安装完成后点击重启，在localhost login那一行输入root用户名，点击回车，然后输入我们刚刚设置好的密码123456，然后回车。以下显示安装成功。

12.输入ping www.bai.com 测试虚拟机是否联网成功。下图显示安装成功。

三.配置Centos7

1.运行yum -y update命令，更新yum源，显示complete则更新完成。

2.关闭系统防火墙，分别输入以下两条命令：

systemctl stop firewalld.service

 systemctl disable firewalld.service

3.关闭Linux系统内核SELinux，输入vi /etc/selinux/config 。

找到SELINUX=enforcing这一行，将enforcing修改为disabled，然后保存退出。

4.输入reboot命令回车重启系统。然后输入/usr/sbin/sestatus -v  查看SELinux是否被禁用。

5.输入yum install vim -y 安装vim编辑器

6.输入：vim /etc/hosts编辑hosts文件

      添加localhost 的ip地址，加上a1和a2，它们的地址在localhost的ip地址后缀处分别加1，修改保存并退出。

7.接着创建Hadooptools文件夹，后面文件放在此文件夹。再根目录进行创建。

        依次输入下面命令：cd /root   mkdir Hadooptools    cd Hadooptools

8.打开下载的xftp，点击新建会话。

 

 9.将Hadoop安装包和jdk安装包拖拽到/root/Hadooptools文件下

 

10.在虚拟机中输入cd /root/Hadooptools命令进入hadoop文件夹，再输入ls查看是否上传成功。