Hadoop集群搭建终极实验(7) _分布式联邦高可用集群部署(Federation+HA)

参考文档:

https://yq.aliyun.com/articles/335669?spm=a2c4e.11155435.0.0.61fd5f09CD5EDz

https://blog.51cto.com/sstudent/1392447

前提实验:本实验是基于Federation, Zookeeper和HA这三个实验的综合Hadoop集群部署实验,在前提实验完成的基础上继续进行HDFS Federation+HA(NameNode Federation+HA)的部署实验

实验目标:部署一个小型的HDFS Federation+HA(NameNode Federation+HA)分布式高可用集群 ,用于教学演示
环境要求:    虚拟机VirtualBox     操作系统 Centos7   

hadoop版本  hadoop-2.6.0-cdh5.7.0             ZooKeeper版本  zookeeper-3.4.5-cdh5.7.0.tar.gz

网络设置: Vitual Box的虚拟机网卡设置为桥接模式,IP地址和机房的网络处于同一网段,确保7台虚拟机互相能Ping通

如果单台实体机的内存容量能承载得了7台Linux虚拟机,则无需用两台实体机搭建桥接模式,使用仅主机模式即可

集群规划一(单台实体机内存不足,桥接模式):

实体机 虚拟机IP 虚拟机主机名 集群角色(运行的进程)
PC1 10.100.235.200 master1 NameNode(Active) ,DFSZKFailoverController
PC1 10.100.235.201 standby1 NameNode(Standby), DFSZKFailoverController
PC1 10.100.235.202 master2 NameNode(Active) ,DFSZKFailoverController
PC1 10.100.235.203 standby2 NameNode(Standby),  DFSZKFailoverController
PC2 10.100.235.204 slave1 DataNode,  JournalNode,  QuorumPeerMain
PC2 10.100.235.205 slave2 DataNode ,  JournalNode, QuorumPeerMain
PC2 10.100.235.207 slave3 DataNode ,  JournalNode,  QuorumPeerMain
       

集群规划二(单台实体机内存充足,仅主机模式):

 

实体机 虚拟机IP 虚拟机主机名 集群角色(运行的进程)
PC1 192.168.56.9 master1 NameNode(Active) ,DFSZKFailoverController 
PC1 192.168.56.10 standby1 NameNode(Standby)  ,DFSZKFailoverController
PC1 192.168.56.11 master2 NameNode(Active)  ,DFSZKFailoverController
PC1 192.168.56.12 standby2 NameNode(Standby),  DFSZKFailoverController
PC1 192.168.56.13 slave1 DataNode,  JournalNode,  QuorumPeerMain
PC1 192.168.56.14 slave2 DataNode,  JournalNode,  QuorumPeerMain
PC1 192.168.56.15 slave3 DataNode,  JournalNode,  QuorumPeerMain

实验步骤: 
1)在PC1的Virtual Box复制四台虚拟

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值