分布式系统Hadoop部署实验

创建虚拟机Hadoop1，网络编辑器，编辑NAT模式

设置完之后，关闭客户机，三种方式，准备进入克隆状态

1. 菜单栏
2. 右键关闭
3. 命令：shutdown now

进入克隆

右键-管理-克隆

更改网络配置：改为static静态地址

登陆到centos7，查看IP地址，记录

改地址：hadoop1  (静态ip地址)

vim /etc/sysconfig/network-scripts/ifcfg-eno33  打开配置文件

其他两台也需要更改

重启网络服务 service network restart

同理：另外两台主机也一样的设置

192.168.80.100    hadoop1

192.168.80.102    hadoop2

192.168.80.103    hadoop3

第二步：通过xshell连接到centos7

新建：

设置三台机器可以免密登陆：

先在三台机器生成公钥和私钥

查看公钥与私钥文件所在目录

拷贝公钥到同一台机

讲秘钥拷贝到其他机器上

验证ssh免密登录

安装jdk和Hadoop

先上传jdk和Hadoop并解压

解压：使用命令tar -zxvf     -c(解压到指定目录)

配置JDK环境变量

保存之后，执行一下命令：让配置生效

JDK环境验证

配置Hadoop环境变量

保存之后，执行一下命令：让配置生效

验证Hadoop环境

配置Hadoop集群主节点

修改core-site.xml文件

修改hdfs-site.xml文件

修改mapred-site.xml文件

修改yarn-site.xml文件

修改slaves文件

将集群主节点的配置文件分发到其他子节点

验证是否成功

JPS查看Hadoop服务是否已经启动

启动Hadoop集群

一键启动集群：start-all.sh

用jps查看进程

查看HDFS、YARN的集群信息

先关闭防火墙：

打开网址：http://hadoop1:50070

查看hadoop运行状态

打开网址：http://hadoop1:8088

查看yarn集群运行状态