一、 下载
下载ZooKeeper,目前最新的稳定版本为 3.5.5 版本【不推荐使用最新版本】推荐使用3.4.14
二、配置java环境变量(必须要有jdk)
如果不会的话,自行百度
三、解压并修改位置
首先将下载的压缩包上传到Linux服务器
#解压到/usr/local下面
tar -zxvf zookeeper-3.4.14.tar.gz -C /usr/local
#进入目录
cd /usr/local/
#修改名字
mv zookeeper-3.4.14/ zookeeper
四、修改配置文件
必须要修改配置文件否则报错!!
#打开zk的配置文件目录
cd /usr/local/zookeeper/conf
#修改zoo_sample.cfg 为zoo.cfg [一定要改]
mv zoo_sample.cfg zoo.cfg
#编辑zoo.cfg
vi zoo.cfg
五、连接启动zookeeper
查看zookeeper下面的bin目录
#启动
./zkServer.sh start
#停止
./zkServer.sh stop
查看zk的运行状态
standalone代表是单机版[一个人自己玩。挂了就结束了,不符合高可用的特点,后面我们一般使用集群]
六、zookeeper的文件系统和监听机制
1.概述
官方文档上这么解释zookeeper,它是一个分布式服务框架,是Apache Hadoop 的一个子项目,它主要是用来解决分布式应用中经常遇到的一些数据管理问题,如:统一命名服务、状态同步服务、集群管理、分布式应用配置项的管理等。
简单来说zookeeper=“文件系统+监听通知机制”。
2.文件系统
每个子目录项如 NameService 都被称作为 znode(目录节点),和文件系统一样,我们能够自由的增加、删除znode,在一个znode下增加、删除子znode,唯一的不同在于znode是可以存储数据的。
监听机制
客户端注册监听它关心的目录节点,当目录节点发生变化(数据改变、被删除、子目录节点增加删除)时,zookeeper会通知客户端。
zookeeper功能非常强大,可以实现诸如分布式应用配置管理、统一命名服务、状态同步服务、集群管理等功能,我们这里拿比较简单的分布式应用配置管理为例来说明。
假设我们的程序是分布式部署在多台机器上,如果我们要改变程序的配置文件,需要逐台机器去修改,非常麻烦,现在把这些配置全部放到zookeeper上去,保存在 zookeeper 的某个目录节点中,然后所有相关应用程序对这个目录节点进行监听,一旦配置信息发生变化,每个应用程序就会收到 zookeeper 的通知,然后从 zookeeper 获取新的配置信息应用到系统中。
##七、zookeeper单机版的使用
通过 ./zkCli.sh 进入客户端后,就可以使用命令来操作zookeeper了。
quit退出客户端
创建节点
使用create命令,可以创建一个zookeeper节点。
//语法
create [-s] [-e] path data acl
//其中-s表示顺序节点,-e表示临时节点。默认情况下,创建的是持久节点。
//path是节点路径,data是节点数据,acl是用来进行权限控制的。
//案例
create /sanguo luoguanzhong 创建一个持久节点目录为/sanguo 值为 luoguanzhong
create -s /shuihu shinaian 创建一个持久顺序节点目录为/shuihu 值为 shinaian
create -e /xiyou wuchengren 创建一个临时节点目录为/xiyou 值为 wuchengren
create -e -s /honglou caoxueqing 创建一个临时顺序节点目录为/honglou 值为 caoxueqing
查看节点内容
使用get命令,可以获取zookeeper指定节点的内容和属性信息。
[zk: 127.0.0.1:2181(CONNECTED) 1] get /sanguo
luoguanzhong
cZxid = 0xd
ctime = Tue Aug 13 20:27:20 CST 2019 创建时候
mZxid = 0xd
mtime = Tue Aug 13 20:27:20 CST 2019 修改时间
pZxid = 0xd
cversion = 0
dataVersion = 0 #没有被修改过,所以版本为0如果有修改过版本会自增
aclVersion = 0
ephemeralOwner = 0x0
dataLength = 12
numChildren = 0
查看子节点
使用ls命令可以查看指定节点下的所有子节点
更新节点的内容
使用set命令,更新节点内容。格式为:
#语法
set path data
其中的data就是要更新的新内容。
删除节点
**注意:如果删除的节点含有子节点时就不能使用delete 删除 如需全部删除 使用rmr **
可以发现,一个节点存在子节点时,无法删除该节点。
###节点监控
再启动一个shell 使用客户端连接
操作步骤
1,在右边的窗口创建一个节点
2,在左边的窗口连接服务器并监控/sanguo节点
3,修改右边窗口的值,发现左边的发生了变化
就说我现在换的这个键盘的键帽来说 我感觉还是很可以的 我真的是这么感觉的呢 小哥哥~~
八、zookeeper集群版搭建测试
1. 首先我们先创建集群文件夹
2.在文件夹中创建三个zookeeper(复制三个原先的zookeeper到集群文件夹)
3.理解zookeeper的选举机制
通过阅读链接 我们基本理解整个选举的流程
4.修改配置文件
首先我们先了解下配置文件的参数
参数名 | 说明 |
---|---|
tickTime | ZK中的一个时间单元。ZK中所有时间都是以这个时间单元为基础,进行整数倍配置的。例如,session的最小超时时间是2*tickTime。 |
initLimit | Follower在启动过程中,会从Leader同步所有最新数据,然后确定自己能够对外服务的起始状态。Leader允许F在 initLimit时间内完成这个工作。通常情况下,我们不用太在意这个参数的设置。如果ZK集群的数据量确实很大了,F在启动的时候,从Leader上同步数据的时间也会相应变长,因此在这种情况下,有必要适当调大这个参数了。(No Java system property) |
syncLimit | 在运行过程中,Leader负责与ZK集群中所有机器进行通信,例如通过一些心跳检测机制,来检测机器的存活状态。如果L发出心跳包在syncLimit之后,还没有从F那里收到响应,那么就认为这个F已经不在线了。注意:不要把这个参数设置得过大,否则可能会掩盖一些问题。(No Java system property) |
dataDir | 存储快照文件snapshot的目录。默认情况下,事务日志也会存储在这里。建议同时配置参数dataLogDir, 事务日志的写性能直接影响zk性能。 |
dataLogDir | 事务日志输出目录。尽量给事务日志的输出配置单独的磁盘或是挂载点,这将极大的提升ZK性能。 (No Java system property) |
clientPort | 客户端连接server的端口,即对外服务端口,一般设置为2181吧。 |
server.x=[hostname]:nnnnn[:nnnnn] | 这里的x是一个数字,与myid文件中的id是一致的。右边可以配置两个端口,第一个端口用于F和L之间的数据同步和其它通信,第二个端口用于Leader选举过程中投票通信。 (No Java system property) |
因为我们跑在一台linux服务器上 只需把三个zookeeper的clientPort端口改不同即可
####集群规划
机器编号 | Ip 地址 | 端口 |
---|---|---|
Zk-1 | 192.168.1.102 | 2181 |
Zk-2 | 192.168.1.102 | 2182 |
Zk-3 | 192.168.1.102 | 2183 |
开始修改配置文件 和 创建 每个zookeeper的data log文件夹 以及data下的myid文件
zk1
给myid里面加入一个值为 1
修改zk1/conf/zoo.cfg
保存即可完成zk1的搭建
关于zk2 和 zk3 的搭建 跟zk1的搭建一样 但是 文件夹的位置不同注意修改, 再就是zk2 zk3 的myid文件值分别为2 和 3
5.启动测试
同时启动三台zk 测试
查看状态
此时我们可以看到zk2为leader
可以测试一下在zk1下面创建一个节点 看看zk2和zk3下面有没有
九、客户端连接zookeeper
解压完成之后 打开文件夹运行cmd 运行jar包
java -jar zookeeper-dev-ZooInspector.jar
出现客户端界面点左上角的三角 运行
集群的连接方式
点击ok即可连接到zookeeper集群
十、zookeeper的应用场景
1.概述
提供的服务包括:统一命名服务、统一配置管理、统一集群管理、服务器节点动态上下线、软负载均衡等。
2.统一命名服务
3.统一配置管理
4.统一集群管理
5.服务动态上线
十一、java操作zookeeper
1.首先创建maven项目 导入zkclient依赖
<dependency>
<groupId>com.101tec</groupId>
<artifactId>zkclient</artifactId>
<version>0.11</version>
</dependency>
2.创建序列化类 防止zk读写乱码
import org.I0Itec.zkclient.exception.ZkMarshallingError;
import org.I0Itec.zkclient.serialize.ZkSerializer;
import java.io.UnsupportedEncodingException;
/**
* @author Xkuna
* @date 2020/7/29 14:04.
*/
public class CustomerSerializer implements ZkSerializer {
private String charset = "UTF-8" ;
@Override
public byte[] serialize(Object o) throws ZkMarshallingError {
byte[] bytes = new byte[0];
try {
bytes = String.valueOf(o).getBytes(charset);
} catch (UnsupportedEncodingException e) {
e.printStackTrace();
}
return bytes ;
}
@Override
public Object deserialize(byte[] bytes) throws ZkMarshallingError {
try {
String s = new String(bytes, charset);
return s ;
} catch (UnsupportedEncodingException e) {
e.printStackTrace();
}
return null;
}
}
3.进行zk集群的CRUD
import org.I0Itec.zkclient.ZkClient;
import org.apache.zookeeper.CreateMode;
/**
* @author Xkuna
* @date 2020/7/29 13:54.
*/
public class TestCrud {
private static final String SERVER_ADDR = "192.168.1.102:2181,192.168.1.102:2182,192.168.1.102:2183" ;
private static ZkClient ZkClient= new ZkClient(SERVER_ADDR, 10000, 10000, new CustomerSerializer()) ;
public static void main(String[] args) {
//增加
/**
* 持久化目录节点(PERSISTENT)
* 持久化顺序编号目录节点(PERSISTENT_SEQUENTIAL)
* 临时目录节点(EPHEMERAL)
* 临时顺序编号目录节点(EPHEMERAL_SEQUENTIAL)
*/
// ZkClient.create("/xkua", "xkuna", CreateMode.PERSISTENT) ;
//修改
// ZkClient.writeData("/xkua", "haha");
//查询
// Object o = ZkClient.readData("/xkua");
// System.out.println(o);
//删除
ZkClient.delete("/xkua") ;
System.out.println("zkclient启动成功!");
}
}
4.zk集群的监听
import org.I0Itec.zkclient.IZkDataListener;
import org.I0Itec.zkclient.ZkClient;
import java.io.IOException;
/**
* @author Xkuna
* @date 2020/7/29 14:35.
*/
public class TestWatch {
private static final String SERVER_ADDR = "192.168.1.102:2181,192.168.1.102:2182,192.168.1.102:2183" ;
private static org.I0Itec.zkclient.ZkClient ZkClient= new ZkClient(SERVER_ADDR, 10000, 10000, new CustomerSerializer()) ;
public static void main(String[] args) throws IOException {
ZkClient.subscribeDataChanges("/haha", new IZkDataListener() {
@Override
public void handleDataChange(String s, Object o) throws Exception {
System.out.println("path: " + s + " data: " + o);
}
@Override
public void handleDataDeleted(String s) throws Exception {
System.out.println("path: " + s);
}
});
System.out.println("zkclient 启动了");
//为了不让程序关闭 从而能够继续 监听到zk的变化
System.in.read() ;
}
}
zk监听节点数据变化结果
此时进入Linux内的zookeeper中修改节点数据
zk监听节点删除结果
此时进入Linux内的zookeeper中删除一个节点