虚拟机安装步骤及hadoop集群配置详细介绍

进入VMware

双击VMware图标，看到如下界面

自定义新的虚拟机

解决虚拟机的兼容性

选择当前虚拟机的操作系统

        我们先配置电脑，再安装系统。

选择虚拟机将来需要安装的系统

因为不同的操作系统需要解决不同的兼容性问题，所以需要选择将来用什么系统，提前做适配。

配置电脑

给自己配置电脑取个名字，并存放在物理机的位置在哪

选择CPU的个数

        有个原则就是选满（跟物理机的CPU个数相同，但是不能超过）

 查看物理机CPU个数（Windows10为例）

设置虚拟机处理器的数量

设置虚拟机的内存

内存大小有一定要求，建议4G，不能给太多，后期会有多台虚拟机同时启动

选择虚拟机上网方式

选择NAT的方式

没有VMware之前物理机的网络适配器信息（每个人不同，我只有3个）

安装VMware之后物理机的网络适配器信息（会多两个vmnet1和vmnet8）

注：vmnet8是虚拟机使用NAT模式上网的网卡

选择对应的文件系统的IO方式

选择磁盘的类型

选择磁盘的种类

选择虚拟机的磁盘大小

虚拟机文件的存放位置

电脑配置完毕

安装系统（CentOS7）

注意：在安装系统之前需要检查自己虚拟机的bios的虚拟化是否打开（大部分的电脑都是打开的，大家可以先尝试直接安装，如果出现错误再去调试，没有出错就不用管了）

以下是查看虚拟机bios是否开启的方式

window10

window7里面看不到（得去bios里面看）

如果发现bios虚拟化没有开启怎么办，重启电脑，在加载界面时按f1-f10,或者电脑旁边一个小洞，具体怎么进入得去查一下（按照自己电脑的型号去查）

修改虚拟化为开启（thinkpad为例）找到security 里面的VT并改成enabled

注：如果虚拟化没有开启报的是以下错误

选择cd/dvd的方式安装系统

系统安装引导界面

你得需要将鼠标点击进入界面中，但是鼠标会消失，你此刻得用键盘的上下键来控制选项，图标变白了表示当前选中的是哪个选项，然后敲回车，表示执行所选选项。

注意：如果这个时候你需要鼠标可以使用ctrl+alt一起按呼出鼠标

耐心等待它的安装

会自动跳转下面的界面

需要定制化的内容

按照编号依次点击

调整时间差

安装GHOME（图形化界面的方式）注意图上标注的点击顺序

配置磁盘分区

手动添加分区

添加boot区 给上1G容量后点击添加挂载点

添加swap交换分区

根目录作为存储使用，将剩下的空间都给他（50 - 4 - 1）= 45

3个分区都配置完毕过后可以点击完成

分区配置完毕，点击接受更改

关闭kdump本身虚拟机内存就不够，他会吃掉一部分内存，我们尽量省一点

修改主机名

是否打开安全协议（开启与否都可以）

开始安装

安装时间比较长，大概需要10几分钟（设置root用户密码，一定要设置）

密码设置成什么自己决定，但是不要忘 建议使用（000000）

虚拟机的使用引导界面

安装完成 重启虚拟机

进入引导界面（以下内容就按照图片走，就不做过多解释）

安装完成

切换root用户

当前登录的用户是刚刚创建的用户，权限会缺少，所以使用root，修改一些内容更加方便

切换root用户

刚才的引导再来一遍（就不再放图片了）

最后的用户变成root表示切换成功

网络配置

对安装好的VMware进行网络配置，方便虚拟机连接网络，本次设置建议选择NAT模式，需要宿主机的Windows和虚拟机的Linux能够进行网络连接，同时虚拟机的Linux可以通过宿主机的Windows进入互联网

编辑VMware的网络配置

然后全部点击确定，VMware的网络配置就好了。

Windows的网络配置

以下以Window10为例

找到

按如上格式修改IP信息（地址，网关，DNS服务器），修改完毕后全部点击确定退出。

虚拟机网络IP修改地址配置

修改网络IP地址为静态IP地址，避免IP地址经常变化，从而方便节点服务器间的互相通信。

vim /etc/sysconfig/network-scripts/ifcfg-ens33

以下加粗的项必须修改，有值的按照下面的值修改，没有该项的则需要增加。

TYPE="Ethernet"    #网络类型（通常是Ethemet）

PROXY_METHOD="none"

BROWSER_ONLY="no"

BOOTPROTO="static"   #IP的配置方法[none|static|bootp|dhcp]（引导时不使用协议|静态分配IP|BOOTP协议|DHCP协议）

DEFROUTE="yes"

IPV4_FAILURE_FATAL="no"

IPV6INIT="yes"

IPV6_AUTOCONF="yes"

IPV6_DEFROUTE="yes"

IPV6_FAILURE_FATAL="no"

IPV6_ADDR_GEN_MODE="stable-privacy"

NAME="ens33"   

UUID="e83804c1-3257-4584-81bb-660665ac22f6"   #随机id

DEVICE="ens33"   #接口名（设备,网卡）

ONBOOT="yes"   #系统启动的时候网络接口是否有效（yes/no）

#IP地址

IPADDR=192.168.10.100  

#网关  

GATEWAY=192.168.10.2      

#域名解析器

DNS1=192.168.10.2

修改IP地址后的结果如图所示，执行“:wq”命令，保存退出

执行systemctl restart network命令，重启网络服务。如果报错，则执行“reboot”命令，重启虚拟机

systemctl restart network

使用ifconfig命令查看当前IP

ifconfig

保证Linux系统ifcfg-ens33文件中IP地址、虚拟网络编辑器地址和Windows系统VM8网络IP地址相同

修改主机名和hosts文件

修改主机名称

vim /etc/hostname

hadoop100

配置Linux克隆机主机名称映射hosts文件，打开/etc/hosts

vim /etc/hosts

添加如下内容

192.168.10.100 hadoop100

192.168.10.101 hadoop101

192.168.10.102 hadoop102

192.168.10.103 hadoop103

192.168.10.104 hadoop104

192.168.10.105 hadoop105

192.168.10.106 hadoop106

192.168.10.107 hadoop107

192.168.10.108 hadoop108

修改windows的主机映射文件（hosts文件）

如果操作系统是window7，可以直接修改

进入C:\Windows\System32\drivers\etc路径

打开hosts文件并添加如下内容，然后保存

192.168.10.100 hadoop100

192.168.10.101 hadoop101

192.168.10.102 hadoop102

192.168.10.103 hadoop103

192.168.10.104 hadoop104

192.168.10.105 hadoop105

192.168.10.106 hadoop106

192.168.10.107 hadoop107

192.168.10.108 hadoop108

如果操作系统是window10，先拷贝出来，修改保存以后，再覆盖即可

进入C:\Windows\System32\drivers\etc路径

拷贝hosts文件到桌面

打开桌面hosts文件并添加如下内容

192.168.10.100 hadoop100

192.168.10.101 hadoop101

192.168.10.102 hadoop102

192.168.10.103 hadoop103

192.168.10.104 hadoop104

192.168.10.105 hadoop105

192.168.10.106 hadoop106

192.168.10.107 hadoop107

192.168.10.108 hadoop108

将桌面hosts文件覆盖C:\Windows\System32\drivers\etc路径hosts文件

远程终端工具安装

通常在工作过程中，公司中使用的真实服务器或者是云服务器，都不允许除运维人员之外的员工直接接触，因此就需要通过远程登录的方式来操作。所以，远程登录工具就是必不可缺的，目前，比较主流的有Xshell，SecureCRT等，同学们可以根据自己的习惯自行选择，以下以Xshell5为例。

Xshell5安装和配置

一直点击下一步，但是有一页收费页，点击免费版，图如下

1. 出现如下界面安装成功

2. 打开安装好的Xshell编辑新链接

3. 测试链接

4. 连接成功

hadoop100虚拟机配置要求如下 

（1）使用yum安装需要虚拟机可以正常上网，yum安装前可以先测试下虚拟机联网情况

[root@hadoop100 ~]# ping www.baidu.com

PING www.baidu.com (14.215.177.39) 56(84) bytes of data.

64 bytes from 14.215.177.39 (14.215.177.39): icmp_seq=1 ttl=128 time=8.60 ms

64 bytes from 14.215.177.39 (14.215.177.39): icmp_seq=2 ttl=128 time=7.72 ms

（2）安装epel-release

注：Extra Packages for Enterprise Linux是为“红帽系”的操作系统提供额外的软件包，适用于RHEL、CentOS和Scientific Linux。相当于是一个软件仓库，大多数rpm包在官方 repository 中是找不到的）

[root@hadoop100 ~]# yum install -y epel-release

（3）注意：如果Linux安装的是最小系统版，还需要安装如下工具；如果安装的是Linux桌面标准版，不需要执行如下操作

• net-tool：工具包集合，包含ifconfig等命令

[root@hadoop100 ~]# yum install -y net-tools

• vim：编辑器

[root@hadoop100 ~]# yum install -y vim

2）关闭防火墙，关闭防火墙开机自启

[root@hadoop100 ~]# systemctl stop firewalld

[root@hadoop100 ~]# systemctl disable firewalld.service

注意：在企业开发时，通常单个服务器的防火墙时关闭的。公司整体对外会设置非常安全的防火墙

3）创建用户，并修改用户的密码

[root@hadoop100 ~]# useradd 用户

[root@hadoop100 ~]# passwd 用户

4）配置atguigu用户具有root权限，方便后期加sudo执行root权限的命令

[root@hadoop100 ~]# vim /etc/sudoers

修改/etc/sudoers文件，在%wheel这行下面添加一行，如下所示：

## Allow root to run any commands anywhere

root    ALL=(ALL)     ALL

## Allows people in group wheel to run all commands

%wheel  ALL=(ALL)       ALL

用户    ALL=(ALL)     NOPASSWD:ALL

注意：atguigu这一行不要直接放到root行下面，因为所有用户都属于wheel组，你先配置了atguigu具有免密功能，但是程序执行到%wheel行时，该功能又被覆盖回需要密码。所以atguigu要放到%wheel这行下面。

5）在/opt目录下创建文件夹，并修改所属主和所属组

（1）在/opt目录下创建module、software文件夹

[root@hadoop100 ~]# mkdir /opt/module

[root@hadoop100 ~]# mkdir /opt/software

（2）修改module、software文件夹的所有者和所属组均为用户    用户 

[root@hadoop100 ~]# chown 用户    :用户    /opt/module

[root@hadoop100 ~]# chown 用户    :用户    /opt/software

（3）查看module、software文件夹的所有者和所属组

[root@hadoop100 ~]# cd /opt/

[root@hadoop100 opt]# ll

总用量 12

drwxr-xr-x. 2 atguigu atguigu 4096 5月  28 17:18 module

drwxr-xr-x. 2 root    root    4096 9月   7 2017 rh

drwxr-xr-x. 2 atguigu atguigu 4096 5月  28 17:18 software

6）卸载虚拟机自带的JDK

注意：如果你的虚拟机是最小化安装不需要执行这一步。

[root@hadoop100 ~]# rpm -qa | grep -i java | xargs -n1 rpm -e --nodeps

• rpm -qa：查询所安装的所有rpm软件包
• grep -i：忽略大小写
• xargs -n1：表示每次只传递一个参数
• rpm -e –nodeps：强制卸载软件

7）重启虚拟机

[root@hadoop100 ~]# reboot

克隆虚拟机

利用模板机hadoop100，克隆三台虚拟机：hadoop102、hadoop103、hadoop104

注意：克隆时，要先关闭hadoop100

2）修改克隆机IP，以下以hadoop102举例说明

（1）修改克隆虚拟机的静态IP

[atguigu@hadoop100 ~]# sudo vim /etc/sysconfig/network-scripts/ifcfg-ens33

改成

DEVICE=ens33

TYPE=Ethernet

ONBOOT=yes

BOOTPROTO=static

NAME="ens33"

IPADDR=192.168.10.102

PREFIX=24

GATEWAY=192.168.10.2

DNS1=192.168.10.2

（2）查看Linux虚拟机的虚拟网络编辑器，编辑->虚拟网络编辑器->VMnet8

（3）查看Windows系统适配器VMware Network Adapter VMnet8的IP地址

（4）保证Linux系统ifcfg-ens33文件中IP地址、虚拟网络编辑器地址和Windows系统VM8网络IP地址相同。

3）修改克隆机主机名，以下以hadoop102举例说明

（1）修改主机名称

[atguigu@hadoop100 ~]# sudo vim /etc/hostname

hadoop102

（2）配置Linux克隆机主机名称映射hosts文件，打开/etc/hosts

[atguigu@hadoop100 ~]# sudo vim /etc/hosts

添加如下内容

192.168.10.100 hadoop100

192.168.10.101 hadoop101

192.168.10.102 hadoop102

192.168.10.103 hadoop103

192.168.10.104 hadoop104

192.168.10.105 hadoop105

192.168.10.106 hadoop106

192.168.10.107 hadoop107

192.168.10.108 hadoop108

4）重启克隆机hadoop102 

[atguigu@hadoop100 ~]# sudo reboot

5）修改windows的主机映射文件（hosts文件）

（1）如果操作系统是window7，可以直接修改 

①进入C:\Windows\System32\drivers\etc路径

②打开hosts文件并添加如下内容，然后保存

192.168.10.100 hadoop100

192.168.10.101 hadoop101

192.168.10.102 hadoop102

192.168.10.103 hadoop103

192.168.10.104 hadoop104

192.168.10.105 hadoop105

192.168.10.106 hadoop106

192.168.10.107 hadoop107

192.168.10.108 hadoop108

（2）如果操作系统是window10，先拷贝出来，修改保存以后，再覆盖即可

①进入C:\Windows\System32\drivers\etc路径

②拷贝hosts文件到桌面

③打开桌面hosts文件并添加如下内容

192.168.10.100 hadoop100

192.168.10.101 hadoop101

192.168.10.102 hadoop102

192.168.10.103 hadoop103

192.168.10.104 hadoop104

192.168.10.105 hadoop105

192.168.10.106 hadoop106

192.168.10.107 hadoop107

192.168.10.108 hadoop108

④将桌面hosts文件覆盖C:\Windows\System32\drivers\etc路径hosts文件

以上就是安装虚拟机和配置hadoop集群的全部过程