Hadoop的集群搭建

目录

 一、虚拟机环境准备

二、安装jdk

三、安装Hadoop

四、集群配置（重点）

1.集群部署规划

2.配置集群

3.配置集群中从节点信息（datanode）

4.分发文件

五、集群启动

常用集群启动停止方式

SSH无密登录配置

检验：

---

 一、虚拟机环境准备

1、克隆三台虚拟机       

   

2、修改主机名 /etc/sysconfig/network  

然后重启主机名分别为：hadoop101；hadoop102；hadoop103；

3、根据自己的网关修改克隆虚拟机的静态ip,分别为：

IP分别为：192.168.5.101；192.168.5.102；192.168.5.103

4、配置主机名和IP的映射关系（便于使用主机名访问虚拟机）

[root@ hadoop101桌面]# vim /etc/hosts

添加如下内容

192.168.1.101 hadoop101

192.168.1.102 hadoop102

192.168.1.103 hadoop103

5、修改window7的主机映射文件（hosts文件）

进入C:\Windows\System32\drivers\etc路径

打开hosts文件并添加如下内容

192.168.5.101 hadoop101

192.168.5.102 hadoop102

192.168.5.103 hadoop103

6、关闭防火墙 service iptables stop；chkconfig iptables off

二、安装jdk

点链接查看

三、安装Hadoop

点击查看

四、集群配置（重点）

1.    集群部署规划

	hadoop101	hadoop102	hadoop103
HDFS	NameNode DataNode	DataNode	SecondaryNameNode DataNode
YARN	NodeManager	ResourceManager NodeManager	NodeManager

2、配置集群

（1）核心配置文件：core-site.xml（hdfs的核心配置文件）

                            作用：决定谁是namenode

[root@hadoop101 hadoop]$ vim core-site.xml