zookeeper
Zookeeper是一个开源的分布式的,为分布式应用提供协调服务的Apache项目。Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件,提供的功能包括:配置维护、域名服务、分布式同步、组服务等。
有哪些应用
- 分布式锁
- 统一命名服务
- 配置管理
- 集群生命周期管理
- 负载均衡
下载
官网下载
https://zookeeper.apache.org/
我也提供了网盘的资源
链接:https://pan.baidu.com/s/1uceU1hF7c7sRWMv2dEYjNg
提取码:uane
本地安装(伪分布)
-
首先,将gz拷贝到linux虚拟机或者服务器中(注意一定要有java环境就是jdk)
-
解压
tar -zxvf zookeeper-3.4.10.tar.gz -C 你的路径 -
vi /etc/profile 配置环境变量
export ZOOKEEPER_HOME=/opt/module/zookeeper
export PATH= P A T H : PATH: PATH:ZOOKEEPER_HOME/bin -
zookeeper-3.4.10/conf中有一个zoo_sample.cfg配置文件,修改为zoo.cfg
-
进入cfg文件,然后找到dataDir=/…/zookeeper-3.4.10/data
这里的data文件夹是需要自己通过dir创建的。
然后就可以启动了
- 启动zookeeper
bin/zkServer.sh start
- 查看进程是否启动
jps
bin/zkServer.sh status
- 其他常用命令
启动客户端:
zkCli.sh
退出:
quit
停止zookeeper
zkServer.sh stop
分布式部署
步骤和本地配置是一样的,区别就是在cfg文件中我们还需要增加集群的信息:
server.1=第一台ip:2888:3888
server.2=第二台ip:2888:3888
server.3=第二台ip:2888:3888
Parameter1是一个数字,表示这个是第几号服务器;
Parameter2是这个服务器的ip地址;
Parameter3是这个服务器与集群中的Leader服务器交换信息的端口;
Parameter4是万一集群中的Leader服务器挂了,需要一个端口来重新进行选举,这个端口就是用来执行选举时服务器相互通信的端口。
另外还需要增加一个id的对应文件idConfig放到data下面,里面只需要写当前服务器或者虚拟机是server.id,这个id这个数字就可以了,比如你想把现在配置的主机当作1号,那么idConfig中只需要放1。
然后将这台机子上的zookeeper中的所有文件复制到集群上的其他主机上,其他主机修改idConfig,然后配置环境变量,这样就完成了。
启动的时候是分别启动的。后面的操作就是一样的了,然后我会在后面的文章中给大家分享zookeeper的机制和原理。
配置参数用法
1)tickTime=2000:通信心跳数,Zookeeper服务器心跳时间,单位毫秒
Zookeeper使用的基本时间,服务器之间或客户端与服务器之间维持心跳的时间间隔,也就是每个tickTime时间就会发送一个心跳,时间单位为毫秒。
2)initLimit=10:Leader和Follower初始通信时限
集群中的follower跟随者服务器与leader领导者服务器之间初始连接时能容忍的最多心跳数(tickTime的数量),用它来限定集群中的Zookeeper服务器连接到Leader的时限。
投票选举新leader的初始化时间
3)syncLimit=5:Leader和Follower同步通信时限
集群中Leader与Follower之间的最大响应时间单位,假如响应超过syncLimit * tickTime,Leader认为Follwer死掉,从服务器列表中删除Follwer。
在运行过程中,Leader负责与ZK集群中所有机器进行通信,例如通过一些心跳检测机制,来检测机器的存活状态。
如果L发出心跳包在syncLimit之后,还没有从F那收到响应,那么就认为这个F已经不在线了。
4)dataDir:数据文件目录+数据持久化路径
保存内存数据库快照信息的位置,如果没有其他说明,更新的事务日志也保存到数据库。
5)clientPort=2181:客户端连接端口
监听客户端连接的端口
参考https://blog.csdn.net/king_qc/article/details/81200434
节点类型
1)Znode有两种类型:
短暂(ephemeral):客户端和服务器端断开连接后,创建的节点自己删除
持久(persistent):客户端和服务器端断开连接后,创建的节点不删除
2)Znode有四种形式的目录节点(默认是persistent )
- 持久化目录节点(PERSISTENT)
客户端与zookeeper断开连接后,该节点依旧存在。
- 持久化顺序编号目录节点(PERSISTENT_SEQUENTIAL)
客户端与zookeeper断开连接后,该节点依旧存在,只是Zookeeper给该节点名称进行顺序编号。
- 临时目录节点(EPHEMERAL)
客户端与zookeeper断开连接后,该节点被删除。
- 临时顺序编号目录节点(EPHEMERAL_SEQUENTIAL)
客户端与zookeeper断开连接后,该节点被删除,只是Zookeeper给该节点名称进行顺序编号。