zookeeper的版本3.5.7
1、概述:
Zookeeper是一个开源的分布式的,为分布式框架提供协调服务的Apache项目。
是一个观察者模式设计的分布式服务管理框架,他负责存储和管理大家都关心的数据。然后接收观察者的注册,一旦这些数据的状态发生变化,Zookeeper就将负载通知已经在Zookeeper上注册的哪些观察者做出相应的反应。
简单总结: Zookeeper = 文件系统 + 通知机制
1) Zookeeper:一个领导者(Leader),多个跟随者(Follower) 组成的集群。
2) 集群中只要有一半以上结点存活,Zookeeper集群就可以正常服务。所以Zookeeper适合安装奇数台服务器。
3)全局数据一致,每个Server保存一份相同的数据副本,Client无论连接那个Server,数据都是一致的。
4)更新请求顺序执行,来自同一个Client的更新请求按其发送顺序依次执行。
5) 数据更新原子性,一次数据更新要么成功,要么失败。
6) 实时性,在一定时间范围内,Client能读取到最新数据。
2、数据结构
Zookeeper数据模型的结构和Unix文件系统很类似,整体上可以看作是一棵树,每个结点称做一个ZNode。每个ZNode默认能够存储1MB的数据。每个ZNode都可以通过其路径唯一标识。
因此:zookeeper不适合存储海量的数据,数据量要在1MB以下。
3、应用场景
统一命名服务,统一配置服务,统一集群管理,服务器节点动态上下线,软负载均衡等。
1、 统一命名服务
在分布式环境下,经常需要对应用/服务进行统一命名,便于识别。
比如设置了一个域名,在其下面注册了一些ip,这个的话就方便了我们记忆。
2、 分布式环境下,配置文件同步
在一个集群中,所有节点的配置信息都是一致的,比如kafka集群。
对配置文件修改后,希望能够快速同步到各个结点上。
3、分布式环境下,实时掌握每个节点的状态是必要的。
可根据节点实时状态做出一些调整。
4、 软负载均衡
在Zookeeper中记录每台服务器的访问数,让访问数最少的服务器去处理最新的客户端请求。
4、Zookeeper选举机制
第一次启动
非第一次启动选举机制
5、zookeeper客户端命令行
# 进入服务
zkClic.sh -server ip:端口
# 查看结点
ls 路径
ls -s 路径 # 详细信息
结点类型:
持久(persistent):客户端和服务器断开连接后,创建的结点不删除。
短暂(Ephemeral): 客户端和服务器端断开连接后,创建的结点自己删除。
create /sanguo "diaochan" # 创建结点
create /sanguo/weiguo # 创建结点sanguo 和创建sanguo下的结点weiguo结点
create -s /sangguo "caocao" # 创建带序号的结点 创建后的结点可能就是sangugo00000000 如果在创建相同的结点的话,他会创建一个sanguo000000001的结点
create -e /sangguo/weiguo "zhouyu" # 创建一个临时结点,断开连接就会删除
set 结点 “结点值” # 修改结点的数据值
get /sanguo # 获取结点的信息
get -s /sanguo # 获取详细的结点信息
6、监听器原理
1、首先有一个main线程
2、在main线程汇总创建Zookeeper客户端,这时就会创建两个线程,一个负责网络连接通信(connet),一个负责监听(listener)。
3、通过conner线程将注册的监听事件发送给Zookeeper。
4、在zookeeper的注册监听器列表中将注册的监听事件添加到列表中。
5、zookeeper监听到有数据或路径拜年话,就会将这个消息发送给listener线程。
6、listener线程内部调用了preoces方法。
get -w /sanguo # 监听数据,只能监听一次变化。 监听值的变化
ls -w /sanguo # 监听结点的子节点变化(路径变化) 只能监听一次
delete /sanguo # 删除结点
deleteall # 递归删除结点
7、代码实现
导入依赖
<dependencies>
<dependency>
<groupId>junit</groupId>
<artifactId>junit</artifactId>
<version>RELEASE</version>
</dependency>
<dependency>
<groupId>org.apache.logging.log4j</groupId>
<artifactId>log4j-core</artifactId>
<version>2.8.2</version>
</dependency>
<dependency>
<groupId>org.apache.zookeeper</groupId>
<artifactId>zookeeper</artifactId>
<version>3.5.7</version>
</dependency>
</dependencies>
String connectSting = "ip:端口,ip:端口,ip:端口";
String sessionTimeOut = 2000; // 2秒
Zookeeper zkClient = null;
@Before
public void init(){
zkClient = new ZooKeeper(connectString,sessionTimeOut,new Wathcher(){
public void process(WatchedEvent watchedEvent){
}
})
// 创建节点
@Test
public void create() throws KeeperException,InterruptedException{
// 路径,值,权限,类型(持久,是否带序号)
Strring nodeCreated =
zkClient.create("/sanguo","值".getBytes(),ZooDefs.Ids.OPEN_ACL_UNSAFE,CreateMode.EPHEMERAL_SEQUENTIAL);
}
@Before
public void init(){
zkClient = new ZooKeeper(connectString,sessionTimeOut,new Wathcher(){
public void process(WatchedEvent watchedEvent){
try{
List<String> children = zkClient..getChildren("/",true)
for (String child : children) {
System.out.println(child);
}
} catch (KeeperException e) {
e.printStackTrace();
} catch (InterruptedException e) {
e.printStackTrace();
}
}
})
// 监听节点
// 和上面的搭配使用可以一直监听
@Test
public void getChildren(){
// 监听的路径,如果为true的话,就是使用创建连接的时候的监听器,也可以自己new
// 返回值根目录下所有节点的集合
List<String> children = zkClient.getChildren("/",true)
for (String child : children) {
System.out.println(child);
}
// 延时
Thread.sleep(Long.MAX_VALUE);
}
// 判断是否存在
@Test
public void exist() throw KeeperException,InterruptedException {
// 是否有/sanguo的节点,是否监听
Stat stat = zkClient.exists("/sanguo",false);
}
8、写数据
直接发送给Leader节点
follower有1半应答就是返回确认。