Hadoop集群部署

本文详细介绍了如何部署Hadoop集群,包括规划IP地址,修改虚拟机的网络配置,设置主机名,实现主机间的免密登录,清理Hadoop伪分布数据,调整配置文件,进行时间同步和NameNode格式化,最后启动Hadoop集群。
摘要由CSDN通过智能技术生成

目录

1、部署规划

2、准备三台虚拟机

(1)创建三个文件夹,然后把之前创建的虚拟机里面的文件分别复制到这三个文件夹中

​编辑 

 (2)用vmware分别打开这三个文件夹下的虚拟机,并分别重命名

3、修改这三台虚拟机的IP 

(1)运行master ,然后打开网卡配置文件,修改ip,修改代码如下

(2)修改ip后,重启网卡,ping www.baidu.com确认访问外网没有问题

 (3)修改主机名,将主机名分别改为master

(4)修改虚拟机的主机名和ip的映射

4、设置免密登录

5、删除Hadoop伪分布式数据

6、修改master主机上的hadoop配置文件

 7、时间同步和NameNode格式化 

 8、启动hadoop集

1、部署规划

         根据实际虚拟机修改集群的IP地址,每个台的虚拟机的IP网段可能都不一样。所以按自己实际的虚拟机进行修改,记好每个主机的ip,避免忘记

2、准备三台虚拟机

        为了方便,我们在之前创建的虚拟机上进行部署

(1)创建三个文件夹,然后把之前创建的虚拟机里面的文件分别复制到这三个文件夹中

 (2)用vmware分别打开这三个文件夹下的虚拟机,并分别重命名

右击鼠标,然后选择重命名

三个虚拟机重命名成功 

3、修改这三台虚拟机的IP 

        因为这三台虚拟机是从原有的虚拟机拷贝过来的,所以所有的东西都是一样的,包括环境变量、已安装的程序(jdk、redis、hadoop、hbase等)、ip、主机名。但是不同的主机,ip和主机名肯定不能一样,所以要修改他们的ip和主机名,以下以修改master 的ip为例

(1)运行master ,然后打开网卡配置文件,修改ip,修改代码如下

vi /etc/sysconf
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值