zookeeper安装与简单使用

1、下载
首先我们下载最新稳定版本的zookeeper

http://apache.fayea.com/zookeeper/stable/

2、解压
下载完成后，我们解开压缩包

zookeeper运行最重要的四个文件

3、创建配置文件
解压后的路径下找到conf文件夹，进入conf文件夹复制zoo_sample.cfg，命名为zoo.cfg

# 每个tick的毫秒数。后面的initLimit和syncLimit都以tick为单位
tickTime=2000
 
#tickTime的个数，表示在leader选举结束后，followers与leader同步需要的时间，如果followers比较多或者说leader的数据灰常多时，同步时间相应可能会增加，那么这个值也需要相应增加。当然，这个值也是follower和observer在开始同步leader的数据时的最大等待时间(setSoTimeout)
initLimit=10
 
# 同步确认时长，是tickTime的个数，这时间容易和上面的时间混淆，它也表示follower和observer与leader交互时的最大等待时间，只不过是在与leader同步完毕之后，进入正常请求转发或ping等消息交互时的超时时间。
syncLimit=5
 
# 快照存储路径，不要使用/tmp。内存数据库快照存放地址，如果没有指定事务日志存放地址(dataLogDir)，默认也是存放在这个路径下，建议两个地址分开存放到不同的设备上。
dataDir=/tmp/zookeeper
 
# 配置ZK监听客户端连接的端口
clientPort=2181
 
#可连接的client的最大数
#如果需要处理更多的clinet，请增加此数量
#maxClientCnxns=60

# Be sure to read the maintenance section of the 
# administrator guide before turning on autopurge.
#
# http://zookeeper.apache.org/doc/current/zookeeperAdmin.html#sc_maintenance
#
# The number of snapshots to retain in dataDir
#autopurge.snapRetainCount=3
# Purge task interval in hours
# Set to "0" to disable auto purge feature
#autopurge.purgeInterval=1

#将事务日志存储在该路径下，比较重要，这个日志存储的设备效率会影响ZK的写吞吐量。
dataLogDir=/


#(Java system property: zookeeper.globalOutstandingLimit)默认值是1000，限定了所有连接到服务器上但是还没有返#回响应的请求个数(所有客户端请求的总数，不是连接总数)，这个参数是针对单台服务器而言，设定太大可能会导致内存溢出。
globalOutstandingLimit


#(Java system property: zookeeper.preAllocSize)默认值64M，以KB为单位,预先分配额定空间用于后续#transactionlog 写入，每当剩余空间小于4K时，就会又分配64M，如此循环。如果SNAP做得比较频繁(snapCount比较小的候)，#那么请减少这个值。
preAllocSize


#(Java system property: zookeeper.snapCount)默认值100,000，当transaction每达到#snapCount/2+rand.nextInt(snapCount/2)时，就做一次SNAPSHOT,默认情况下是50,000~100,000条transactionlog做 #一次，之所以用随机数是为了避免所有服务器可能在同一时间做snapshot.
snapCount


#默认值是10，一个客户端能够连接到同一个服务器上的最大连接数，根据IP来区分。如果设置为0，表示没有任何限制。设置该值一方#面是为了防止DoS攻击。
maxClientCnxns


#与clientPort匹配，表示某个IP地址，如果服务器有多个网络接口(多个IP地址),如果没有设置这个属性，则clientPort会绑定 #到所有IP地址上，否则只绑定到该设置的IP地址上。
clientPortAddress


#最小的session time时间，默认值是2个tick time,客户端设置的session time 如果小于这个值，则会被强制协调为这个最小#值。
minSessionTimeout


#最大的session time 时间，默认值是20个tick time. ,客户端设置的session time 如果大于这个值，则会被强制协调为这个#最大值。
maxSessionTimeout

对于学习来说，一般无需做修改。生产环境，需要修改dataDir。其他参数后续调优。

4、单机启动ZooKeeper
在ZooKeeper根目录下执行 bin/zkServer.sh start

➜  zookeeper-3.4.12 bin/zkServer.sh start
ZooKeeper JMX enabled by default
Using config: /Users/yimingli/dev/tool/zookeeper-3.4.12/bin/../conf/zoo.cfg
Starting zookeeper ... STARTED

5、通过客户端连接ZooKeeper

➜  zookeeper-3.4.12 bin/zkCli.sh

6、通过客户端执行基本命令
（1）创建znode，名为/my_test，携带数据testData

[zk: localhost:2181(CONNECTED) 0] create /my_test testData

（2）查看znode信息

[zk: localhost:2181(CONNECTED) 2] get /my_test

返回如下：

testData
cZxid = 0x2e9
ctime = Mon Oct 29 10:50:46 CST 2018
mZxid = 0x2e9
mtime = Mon Oct 29 10:50:46 CST 2018
pZxid = 0x2e9
cversion = 0
dataVersion = 0
aclVersion = 0
ephemeralOwner = 0x0
dataLength = 8
numChildren = 0

（3）修改znode数据

[zk: localhost:2181(CONNECTED) 3] set /my_test testDataV2

（4）创建子znode

[zk: localhost:2181(CONNECTED) 0] create /my_test/tester1 testData

（5）列出子znode

[zk: localhost:2181(CONNECTED) 5] ls  /my_test
[tester1]

（6）删除znode

有子节点的znode不能直接删除，否则会报错。

[zk: localhost:2181(CONNECTED) 6] delete /my_test
Node not empty: /my_test

我们删除/my_test/tester1。

[zk: localhost:2181(CONNECTED) 8] delete /my_test/tester1

再次查看该znode。

[zk: localhost:2181(CONNECTED) 9] get /my_test/tester1
Node does not exist: /my_test/tester1

已经被成功删除了。

7、集群配置和启动
我们配置和启动一个三台server的集群。

（1）修改zoo.cfg文件

tickTime=2000
dataDir=/var/lib/zookeeper
clientPort=2181
initLimit=5
syncLimit=2
server.1=ip1:2888:3888
server.2=ip2:2888:3888
server.3=ip3:2888:3888

initLimit，zookeeper用来限制zookeeper服务器连接到leader的时长。

syncLimit，一个服务器多久在leader那里过期。

以上两种过期时间，单位都是tickTime，

本例initLimit时长为5个tickTime＝5*2000ms＝10秒

server.x列出了所有的zookeeper服务。集群启动它通过查看data下面的myid来知道自己是哪台服务器。

2888用来连接其它server。3888用来leader选举。

（2）复制2份zookeeper到另外两台server上。

（3）在配置文件中的dataDir路径下创建myid文件,文件内容为对应自己的server.x的x值。比如server.1这台sever，myid文件中内容为1。

（4）启动每个zookeeper

（5）查看本机状态，是leader还是follower

➜  zookeeper-3.4.12 bin/zkServer.sh status

至此我们已经把zookeeper集群启动起来了，并且做了验证，有一台是leader，另外两台是follower。

我们还可以做个实验，看zookeeper集群是否工作正常。

（1）连接其中一台server，创建一个znode。

➜  zookeeper-3.4.12 bin/zkCli.sh -server ip1:2181

[zk: ip1:2181(CONNECTED) 10] create /zk_test my_data
（2）连接另外一台server，列出所有根节点下znode。

➜  zookeeper-3.4.12 bin/zkCli.sh -server ip2:2181
[zk: ip2:2181(CONNECTED) 10] ls /

输出如下：

[zk_test]

可以看到集群已经能够正常工作，server间可以正常进行数据的复制。

客户端连接集群方法如下：

➜  zookeeper-3.4.12 bin/zkCli -server ip1:2181,ip2:2181,ip3:2181

客户端会自动随机选择集中一台连接。