本文档详细介绍了Hadoop 3.3版本的高可用性安装步骤，包括HDFS和Yarn的高可用配置，Zookeeper集群设置，Linux网络与软件环境的准备，以及CDH的安装和验证。强调了NameNode、Resource Manager的HA实现，以及NTP时间同步的重要性。
HDFS高可用至少有两个NameNode（NN）从hadoop3以后NameNode可以支持多个，副本存三份有 三个DataNode（DN）。
Yarn高可用至少有两个Resource Manager（RM），计算向存储移动需要在每个DataNode上部署NodeManager（NM）。
Zookeeper（ZK）三节点选主。JournalNode（JN）三节点才有过半成功。
真正生产环境机器的域名一般是有意义命名，比如 brt.master1.baidu.com , brt.master2.baidu.com
| master1 230 |
master2 232 |
slave1 231 |
slave2 233 |
||
| hadoop 3.3 |
namenode |
yes |
yes |
</ |
订阅专栏 解锁全文
扫一扫
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
