![](https://img-blog.csdnimg.cn/20201014180756913.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
ZooKeeper
文章平均质量分 64
AdamShyly
努力学习
展开
-
基于ZooKeeper的Kafka分布式集群搭建与集群启动停止Shell脚本
模式搭建高可用的集群以提高数据处理效率,但是目前还有许多企业依然使用ZooKeeper搭建Kafka集群,所以本文也采用ZooKeeper组件来搭建Kafka分布式集群。以broker ID为0的节点为例,下方是该节点配置Kafka的具体步骤,另外两个broker节点的配置步骤与其一致。下方是Kafka官网下载地址,本文使用。在虚拟机环境中搭建分布式集群。原创 2024-04-03 17:33:16 · 755 阅读 · 2 评论 -
Hadoop HA 配置文件以及自动化Shell脚本开关HA集群
目录配置文件workerscore-site.xmlhdfs-site.xmlmapred-site.xmlyarn-site.xml自动化Shell脚本format-hahadoop-hajpsallxcallxsynczk测试自动化脚本HA集群初始化启动HA集群关闭HA集群配置文件workershadoop102hadoop103hadoop104core-site.xml<config...原创 2022-04-25 00:27:49 · 1150 阅读 · 0 评论 -
Hadoop HA 完全分布式集群搭建(ZooKeeper)
学了大半个月hadoop,现在来完整搭建并测试一遍HA集群,本文总共使用了三台CentOS 7.9服务器:hadoop102 hadoop103 hadoop104,hadoop版本为3.2.3,ZK版本为3.5.9,JDK版本为1.8;以下是本次实验所配置的环境变量#JAVA_HOMEexport JAVA_HOME=/opt/module/jdk1.8.0_321export PATH=$PATH:$JAVA_HOME/bin#HADOOP_HOMEexport HADOOP_HOME=/o原创 2022-04-25 00:01:43 · 1730 阅读 · 1 评论 -
ZooKeeper API 监听器初始化调用问题
我在ZooKeeper类中传递一个监听器匿名对象,经测试发现process方法在每次创建完ZooKeeper对象后都会被调用一次 private final String connectString = "hadoop102:2181,hadoop103:2181,hadoop104:2181"; private final int sessionTimeout = 2000; private ZooKeeper zkClient; @Before public原创 2022-04-20 17:07:46 · 601 阅读 · 0 评论