[ZooKeeper]实践篇-命令操作

最新推荐文章于 2024-06-26 10:33:06 发布
最新推荐文章于 2024-06-26 10:33:06 发布
阅读量1.5k 收藏 1
点赞数 1
分类专栏： ZooKeeper 分布式 kafka 文章标签： zookeeper
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/a112626290/article/details/102935497
版权
分布式 同时被 3 个专栏收录
11 篇文章 0 订阅
订阅专栏
kafka
8 篇文章 0 订阅
订阅专栏
ZooKeeper
4 篇文章 0 订阅
订阅专栏

这篇继上篇实践篇，对zookeeper进行一些命令行的使用总结。
国内的帖子存在最大的问题，都是一般只有一篇原创，其余的人都是复制粘贴。这就存在一个最大的问题，如果没有实践，没有经过验证就发出来，会给初学者造成困扰。
因此，在借鉴了官方文档以及部分帖子的前提下，基本都是基于自己实践获得，因此如果存在一些问题是正常的，所以希望看到这篇文档有疑问的对我提问，并针对其中的错误进行斧正。十分感谢。

文章目录

一、建立客户端连接

./zkCli.sh -server 192.168.133.14:2181

[app@node1 bin]$ ./zkCli.sh -server 192.168.133.14:2181
Connecting to 192.168.133.14:2181
2019-11-06 15:05:43,619 [myid:] - INFO  [main:Environment@109] - Client environment:zookeeper.version=3.5.6-c11b7e26bc554b8523dc929761dd28808913f091, built on 10/08/2019 20:18 GMT
2019-11-06 15:05:43,623 [myid:] - INFO  [main:Environment@109] - Client environment:host.name=zoo-2
2019-11-06 15:05:43,623 [myid:] - INFO  [main:Environment@109] - Client environment:java.version=1.8.0_131
2019-11-06 15:05:43,627 [myid:] - INFO  [main:Environment@109] - Client environment:java.vendor=Oracle Corporation
2019-11-06 15:05:43,627 [myid:] - INFO  [main:Environment@109] - Client environment:java.home=/app/soft/jdk1.8.0_131/jre
2019-11-06 15:05:43,627 [myid:] - INFO  [main:Environment@109] - Client environment:java.class.path=/app/soft/zookeeper/bin/../zookeeper-server/target/classes:/app/soft/zookeeper/bin/../build/classes:/app/soft/zookeeper/bin/../zookeeper-server/target/lib/*.jar:/app/soft/zookeeper/bin/../build/lib/*.jar:/app/soft/zookeeper/bin/../lib/zookeeper-jute-3.5.6.jar:/app/soft/zookeeper/bin/../lib/zookeeper-3.5.6.jar:/app/soft/zookeeper/bin/../lib/slf4j-log4j12-1.7.25.jar:/app/soft/zookeeper/bin/../lib/slf4j-api-1.7.25.jar:/app/soft/zookeeper/bin/../lib/netty-transport-native-unix-common-4.1.42.Final.jar:/app/soft/zookeeper/bin/../lib/netty-transport-native-epoll-4.1.42.Final.jar:/app/soft/zookeeper/bin/../lib/netty-transport-4.1.42.Final.jar:/app/soft/zookeeper/bin/../lib/netty-resolver-4.1.42.Final.jar:/app/soft/zookeeper/bin/../lib/netty-handler-4.1.42.Final.jar:/app/soft/zookeeper/bin/../lib/netty-common-4.1.42.Final.jar:/app/soft/zookeeper/bin/../lib/netty-codec-4.1.42.Final.jar:/app/soft/zookeeper/bin/../lib/netty-buffer-4.1.42.Final.jar:/app/soft/zookeeper/bin/../lib/log4j-1.2.17.jar:/app/soft/zookeeper/bin/../lib/json-simple-1.1.1.jar:/app/soft/zookeeper/bin/../lib/jline-2.11.jar:/app/soft/zookeeper/bin/../lib/jetty-util-9.4.17.v20190418.jar:/app/soft/zookeeper/bin/../lib/jetty-servlet-9.4.17.v20190418.jar:/app/soft/zookeeper/bin/../lib/jetty-server-9.4.17.v20190418.jar:/app/soft/zookeeper/bin/../lib/jetty-security-9.4.17.v20190418.jar:/app/soft/zookeeper/bin/../lib/jetty-io-9.4.17.v20190418.jar:/app/soft/zookeeper/bin/../lib/jetty-http-9.4.17.v20190418.jar:/app/soft/zookeeper/bin/../lib/javax.servlet-api-3.1.0.jar:/app/soft/zookeeper/bin/../lib/jackson-databind-2.9.10.jar:/app/soft/zookeeper/bin/../lib/jackson-core-2.9.10.jar:/app/soft/zookeeper/bin/../lib/jackson-annotations-2.9.10.jar:/app/soft/zookeeper/bin/../lib/commons-cli-1.2.jar:/app/soft/zookeeper/bin/../lib/audience-annotations-0.5.0.jar:/app/soft/zookeeper/bin/../zookeeper-*.jar:/app/soft/zookeeper/bin/../zookeeper-server/src/main/resources/lib/*.jar:/app/soft/zookeeper/bin/../conf:
2019-11-06 15:05:43,628 [myid:] - INFO  [main:Environment@109] - Client environment:java.library.path=/usr/java/packages/lib/amd64:/usr/lib64:/lib64:/lib:/usr/lib
2019-11-06 15:05:43,628 [myid:] - INFO  [main:Environment@109] - Client environment:java.io.tmpdir=/tmp
2019-11-06 15:05:43,628 [myid:] - INFO  [main:Environment@109] - Client environment:java.compiler=<NA>
2019-11-06 15:05:43,628 [myid:] - INFO  [main:Environment@109] - Client environment:os.name=Linux
2019-11-06 15:05:43,629 [myid:] - INFO  [main:Environment@109] - Client environment:os.arch=amd64
2019-11-06 15:05:43,629 [myid:] - INFO  [main:Environment@109] - Client environment:os.version=3.10.0-957.el7.x86_64
2019-11-06 15:05:43,629 [myid:] - INFO  [main:Environment@109] - Client environment:user.name=app
2019-11-06 15:05:43,629 [myid:] - INFO  [main:Environment@109] - Client environment:user.home=/home/app
2019-11-06 15:05:43,629 [myid:] - INFO  [main:Environment@109] - Client environment:user.dir=/app/soft/zookeeper/bin
2019-11-06 15:05:43,630 [myid:] - INFO  [main:Environment@109] - Client environment:os.memory.free=13MB
2019-11-06 15:05:43,636 [myid:] - INFO  [main:Environment@109] - Client environment:os.memory.max=247MB
2019-11-06 15:05:43,637 [myid:] - INFO  [main:Environment@109] - Client environment:os.memory.total=15MB
2019-11-06 15:05:43,644 [myid:] - INFO  [main:ZooKeeper@868] - Initiating client connection, connectString=192.168.133.14:2181 sessionTimeout=30000 watcher=org.apache.zookeeper.ZooKeeperMain$MyWatcher@368102c8
2019-11-06 15:05:43,669 [myid:] - INFO  [main:X509Util@79] - Setting -D jdk.tls.rejectClientInitiatedRenegotiation=true to disable client-initiated TLS renegotiation
2019-11-06 15:05:43,675 [myid:] - INFO  [main:ClientCnxnSocket@237] - jute.maxbuffer value is 4194304 Bytes
2019-11-06 15:05:43,697 [myid:] - INFO  [main:ClientCnxn@1653] - zookeeper.request.timeout value is 0. feature enabled=
Welcome to ZooKeeper!
JLine support is enabled
2019-11-06 15:05:43,803 [myid:192.168.133.14:2181] - INFO  [main-SendThread(192.168.133.14:2181):ClientCnxn$SendThread@1112] - Opening socket connection to server zoo-1/192.168.133.14:2181. Will not attempt to authenticate using SASL (unknown error)
2019-11-06 15:05:44,084 [myid:192.168.133.14:2181] - INFO  [main-SendThread(192.168.133.14:2181):ClientCnxn$SendThread@959] - Socket connection established, initiating session, client: /192.168.133.15:44470, server: zoo-1/192.168.133.14:2181
2019-11-06 15:05:44,146 [myid:192.168.133.14:2181] - INFO  [main-SendThread(192.168.133.14:2181):ClientCnxn$SendThread@1394] - Session establishment complete on server zoo-1/192.168.133.14:2181, sessionid = 0x100015882d00000, negotiated timeout = 30000

WATCHER::

WatchedEvent state:SyncConnected type:None path:null
[zk: 192.168.133.14:2181(CONNECTED) 0]

二、客户端命令

先查看帮助，看有哪些指令：

[zk: 192.168.133.14:2181(CONNECTED) 0] help
ZooKeeper -server host:port cmd args
	addauth scheme auth
	close 
	config [-c] [-w] [-s]
	connect host:port
	create [-s] [-e] [-c] [-t ttl] path [data] [acl]
	delete [-v version] path
	deleteall path
	delquota [-n|-b] path
	get [-s] [-w] path
	getAcl [-s] path
	history 
	listquota path
	ls [-s] [-w] [-R] path
	ls2 path [watch]
	printwatches on|off
	quit 
	reconfig [-s] [-v version] [[-file path] | [-members serverID=host:port1:port2;port3[,...]*]] | [-add serverId=host:port1:port2;port3[,...]]* [-remove serverId[,...]*]
	redo cmdno
	removewatches path [-c|-d|-a] [-l]
	rmr path
	set [-s] [-v version] path data
	setAcl [-s] [-v version] [-R] path acl
	setquota -n|-b val path
	stat [-w] path
	sync path

1.查询指令

ls命令

ls [-s] [-w] [-R] path
查看某个ZNode节点下面的子节点

[zk: 192.168.133.14:2181(CONNECTED) 1] ls /
[zookeeper]
[zk: 192.168.133.14:2181(CONNECTED) 21] ls -R /
/
/test1
/zookeeper
/zookeeper/config
/zookeeper/quota
[zk: 192.168.133.14:2181(CONNECTED) 22] ls -s /
[test1, zookeeper]cZxid = 0x0
ctime = Thu Jan 01 08:00:00 CST 1970
mZxid = 0x0
mtime = Thu Jan 01 08:00:00 CST 1970
pZxid = 0x700000015
cversion = 12
dataVersion = 0
aclVersion = 0
ephemeralOwner = 0x0
dataLength = 0
numChildren = 2

stat命令

stat path
查看节点状态
[zk: 192.168.133.14:2181(CONNECTED) 3] stat /zookeeper
cZxid = 0x0
ctime = Thu Jan 01 08:00:00 CST 1970
mZxid = 0x0
mtime = Thu Jan 01 08:00:00 CST 1970
pZxid = 0x0
cversion = -2
dataVersion = 0
aclVersion = 0
ephemeralOwner = 0x0
dataLength = 0
numChildren = 2

stat状态查询出的具体含义，可以参考这里

2.创建指令

create命令

create [-s] [-e] [-c] [-t ttl] path [data] [acl]

acl cdrwa #其权限为CREATE,DELETE,READ,WRITE,ADMIN权限的缩写名称

节点类型指定

-s 表示顺序节点，-e 表示临时节点，什么都不带时为持久节点。
其实本质上只有两类：持久节点和临时节点。
理论篇有提到，临时节点的存活时间为当前session，一旦退出则节点失效；持久节点创建后除非主动去删除，否则永远存在。那么顺序节点是什么？顺序节点是对上述节点的补充，由zk自己维护一个数值，加在节点名称后面，是一个高位补0的10位的数值，例如zk_test0000000002。

这么说可能有些抽象，那么来举几个例子：

  1. create -s -e /zk_test 创建的是一个顺序的临时节点（zk_test0000000002）
  2. create -s /zk_test 创建的是一个顺序的持久节点(zk_test0000000003)
  3. create /zk_test 创建的是一个持久节点（zk_test）

场景模拟 顺序的临时节点

（1）节点创建
–客户端连接1-- 创建一个顺序的临时节点：

[zk: 192.168.133.14:2181(CONNECTED) 49] create -s -e /zk_test
Created /zk_test0000000005
[zk: 192.168.133.14:2181(CONNECTED) 50] ls /
[zk_test0000000005, zookeeper]

–客户端连接2-- 查看所有根目录节点：

ls /
[zk_test0000000005, zookeeper]

（2）节点失效

–客户端连接1–关闭客户端连接

[zk: 192.168.133.14:2181(CONNECTED) 51] close

WATCHER::

WatchedEvent state:Closed type:None path:null
2019-11-06 16:34:12,070 [myid:] - INFO  [main:ZooKeeper@1422] - Session: 0x100015882d00000 closed

–客户端连接2-- 查看所有根目录节点：

[zk: 192.168.133.14:2181(CONNECTED) 11] ls /
[zookeeper]

3.修改指令

set命令

set [-s] [-v version] path data
在这里插入图片描述

带版本号去更新时是以乐观锁的原理实现的，带了不恰当的版本号会使更新失败：
在这里插入图片描述

4.删除指令

delete指令

delete [-v version] path

[zk: 192.168.133.14:2181(CONNECTED) 36] delete /test1

WATCHER::

WatchedEvent state:SyncConnected type:NodeChildrenChanged path:/
[zk: 192.168.133.14:2181(CONNECTED) 37] ls /
[zookeeper]

需要注意的是，删除时必须保证其没有子节点，否则删除失败：

[zk: 192.168.133.14:2181(CONNECTED) 47] ls -R /test
/test
/test/test1
/test/test2
/test/test1/test11
/test/test2/test21

[zk: 192.168.133.14:2181(CONNECTED) 48] delete /test
Node not empty: /test

deleteall

deleteall path

[zk: 192.168.133.14:2181(CONNECTED) 49] deleteall /test
[zk: 192.168.133.14:2181(CONNECTED) 50] ls /
[zookeeper]
[zk: 192.168.133.14:2181(CONNECTED) 51]

5.监控指令

setquota

zookeeper中可以往节点存放数据，但是一般来说存放数据有限，所以zookeeper提供了一个对节点配额功能。但配额功能有点鸡肋，当占用的空间超过了设置的大小时只会打印WARN级别的日志提醒而不是直接让超出配额的操作失败。
setquota -n|-b val path

-n 设置最大节点个数，包括当前节点
-b 设置最大字节大小
在这里插入图片描述
然后查看日志：
在这里插入图片描述
这里体现出，当前节点占用了其中一个计数。

listquota

listquota path
在这里插入图片描述

delquota

delquota [-n|-b] path
在这里插入图片描述

6.鉴权命令

zookeeper中的权限控制，简称ACL（Access Control List），用于控制资源的访问权限。

getAcl

getAcl [-s] path
获取权限信息

[zk: localhost:2181(CONNECTED) 9] getAcl /zookeeper
'world,'anyone
: cdrwa

setAcl

setAcl [-s] [-v version] [-R] path acl
给指定的目录设置权限
1.明文加密

[zk: localhost:2181(CONNECTED) 22] create /node_test_plaintext 12
Created /node_test
[zk: localhost:2181(CONNECTED) 8] addauth digest plaintext:123456
[zk: localhost:2181(CONNECTED) 9] setAcl /node_test_plaintext auth:plaintext:123456:cdrwa
[zk: localhost:2181(CONNECTED) 10] getAcl /node_test_plaintext
'digest,'plaintext:FKcAjTOLKBpigavAWb36jCfFMk0=
: cdrwa

2.密文加密
先计算一个密文，该密文是经过SHA1及BASE64处理的密文，在SHELL中可以通过以下命令计算：

[app@test13 bin]$ echo -n plaintext:123456 | openssl dgst -binary -sha1 | openssl base64
FKcAjTOLKBpigavAWb36jCfFMk0=

[zk: localhost:2181(CONNECTED) 11] create /node_test_ciphertext 30
Created /node_test_ciphertext
[zk: localhost:2181(CONNECTED) 12] setAcl /node_test_ciphertext digest:plaintext:FKcAjTOLKBpigavAWb36jCfFMk0=:cdrwa
[zk: localhost:2181(CONNECTED) 13] getAcl /node_test_ciphertext
'digest,'plaintext:FKcAjTOLKBpigavAWb36jCfFMk0=
: cdrwa
[zk: localhost:2181(CONNECTED) 14] get /node_test_ciphertext
30

因为在此session中进行了用户名和密码的校验，而上一步明文加密时输入了用户名和密码，因此可以正常查询值。

此处新开一个客户端连接：

[zk: localhost:2181(CONNECTED) 1] get /node_test_ciphertext
org.apache.zookeeper.KeeperException$NoAuthException: KeeperErrorCode = NoAuth for /node_test_ciphertext

此处提示我们未鉴权，通过以下方式鉴权即可：

[zk: localhost:2181(CONNECTED) 2] addauth digest plaintext:123456
[zk: localhost:2181(CONNECTED) 3] get /node_test_ciphertext
30

这里鉴权的问题上，很多帖子没有讲清楚的一点是，setAcl中auth和digest的区别：auth是明文，digest是密文，而在session中鉴权(addauth)时，只有digest没有auth，实际操作时如果使用了auth会退出session。

不曾听说
关注
专栏目录
Zookeeper --------操作命令篇
烟雨gps
04-18 624
Zookeeper --------操作命令篇 目录 Zookeeper --------操作命令篇 1、基础命令操作 2、watch机制命令操作 3、ACL权限控制操作 1、基础命令操作 服务端常见命令： （1）启动服务命令：./zkServer.sh start [root@localhost bin]# ./zkServer.sh start ZooKeeper JMX ...
ZooKeeper 命令操作
jeikerxiao
06-05 215
ZooKeeper 命令操作 创建节点 创建节点的参数 -s 创建顺序节点 -e 创建临时节点 创建空节点 [zk: localhost:2181(CONNECTED) 63] create /node Created /node 创建带数据的节点 [zk: localhost:2181(CONNECTED) 4] create /first-node hello Created /firs...
zookeeper高可用shell脚本监测.
04-29
zookeeper实现监测心跳，调用shell脚本，保证redis高可用
Apache ZooKeeper之shell 操作
最慢的步伐不是跬步，而是徘徊；最快的脚步不是冲刺，而是坚持
12-09 7771
ZooKeeper shell 1、客户端连接 进入 cd /export/servers/zookeeper-3.4.5-cdh5.14.0/bin/ 下 运行zkCli.sh -server node001进入命令行工具 输入 help，输出zk shell提示： 2、shell基本操作 创建节点 create [-s] [-e...
博客摘录「 绿盟漏洞 ：服务器支持 TLS Client-initiated 重协商攻击(CVE-2011-1473)【原理扫描】」2024年6月26日
最新发布
l540002038的博客
06-26 879
第一步：按下' Win + R'，进入"运行"，键入" gpedit.msc"，打开"本地组策略编辑器"。第三步：在"SSL密码套件顺序"选项上，右键"编辑"->在"SSL密码套件顺序"选在"已启用（E）"。3、SSL/TLS 受诫礼(BAR-MITZVAH)攻击漏洞(CVE-2015-2808)【原理扫描】2、SSL/TLS 服务器瞬时 Diffie-Hellman 公共密钥过弱【原理扫描】第二步：打开计算机配置->管理模板->网络->SSL配置设置。点击"应用"、"确定"，并重启系统实现修复。
Kafka zookeeper-shell.sh
m0_45406092的博客
11-23 3604
bin/zookeeper-shell.sh作用是连接zookeeper，并通过命令查询注册的信息，本质上就是zookeeper的语法。 bin/zookeeper-shell.sh zookeeper_host:port[/path] [args…] args参数类型如下 stat path [watch] set path data [version] ls path [watch] delq...
Kafka中的zookeeper-shell.sh
weixin_33811539的博客
05-03 1815
2019独角兽企业重金招聘Python工程师标准>>> ...
zookeeper 创建临时顺序节点_Zookeeper命令操作实践篇，包含创建节点，节点权限设置...
weixin_39874795的博客
11-23 2877
本文讲解了zk的节点类型、zk的常用命令包含acl权限方面的。Zookeeper节点类型1、Znode 有两种类型：临时(ephemeral)(create -e /app1/test1 “test1” 客户端断开连接, zk 将删除 ephemeral 类型节点)持久(persistent) (create -s /app1/test2 “test2” 客户端断开连接 zk 不删除 persis...
zookeeper-3.4.5,metamorphosis-server-wrapper
08-15
本篇将深入探讨Zookeeper 3.4.5版本以及与其相关的Metamorphosis-Server-Wrapper工具包，旨在帮助读者理解和掌握这两个组件的核心概念、功能及应用场景。 首先，Zookeeper是Apache软件基金会的一个开源项目，它提供...
ZooKeeper分析-服务端启动篇
小张的专栏
05-03 787
前言 今年五一认真整理以前凌凌散散的学习内容，发现虽然看得多，但是如果不去看看源码，真的是不深刻，没什么感觉，这也是为什么要重新整理ZooKeeper的相关学习笔记了，在前面的时候我们介绍ZooKeeper的一些重要的概念，在整体上对ZooKeeper 有了一个简单的认识，下面我们再从服务端的启动流程来了解了解，本小节不会将集群的选举过程，这个将放在下一篇文章中介绍，本节知识整体了解一下服务端的启...
kafka+zookeeper高可用集群搭建shell使用脚本
02-22
kafka+zookeeper高可用集群搭建shell使用脚本，直接在linux运行就行
zookeeper-3.4.6 eclipse
06-12
本篇将重点讲解如何在Eclipse环境中集成Zookeeper 3.4.6版本，以便进行本地开发和调试。 首先，我们需要了解Zookeeper 3.4.6的基础知识。这一版本主要包含了一些bug修复和性能优化，确保了系统的稳定性和可靠性。它...
ZooKeeper实战篇之zk集群搭建、zkCli.sh操作、权限控制ACL、ZooKeeper JavaAPI使用
雷恩Layne
03-14 1922
在看了史上最全的Zookeeper原理详解(万字长文)，了解Zookeeper的原理后，你是不是蠢蠢欲动想着手实践呢？这篇文章将手把手教你在Linux上搭建ZooKeeper集群，并调用相关API实现自己的Zookeeper应用。 文章目录1. Linux上搭建ZooKeeper集群1.1 多台服务器之间免密登录1.2 ZooKeeper集群搭建2. zkCli.sh客户端操作2.1 打开客户端2.2 创建节点2.3 读取节点2.4 更新节点2.5 删除节点3. Zookeeper 权限控制 ACL3.1
zookeeper的shell操作
weixin_30883311的博客
07-04 151
一、启动zookeeper集群 　　进入zookeeper安装目录下的bin目录内，通过命令启动 ./zkServer.sh start 　　通过命令查看节点状态 ./zkServer.sh status 　　通过命令关闭 ./zkServer.sh stop 二、连接zookeeper服务 　　启动zookeeper服务之后，输入以下命令，连接...
使用kafka bin目录中的zookeeper-shell.sh来查看kafka在zookeeper中的配置
weixin_30697239的博客
02-27 417
cdkafka_2.11-0.10.2.1\bin\windowsecho ls /brokers/ids | zookeeper-shell.batlocalhost:2181 使用kafka bin目录中的zookeeper-shell.sh来查看kafka在zookeeper中的配置。 连接zookeeper： bin/zookeeper-shell.sh 127.0.0....
Zookeeper常用Shell命令
mxk4869的博客
07-19 849
Zookeeper常用Shell命令
zookeeper shell -- zkCli.sh 命令基本使用操作
老实人张大傻
04-29 2400
客户端命令行操作 基本命令 命令参数 功能描述 addauth addauth scheme auth 创建 && 验证用户 close – – config config [-c] [-w] [-s] – connect connect host:port 连接 create create [-s] [-e] [-c] [-t ttl] pat...
Zookeeper集群配置与命令指南
"这篇文档详细介绍了Zookeeper...通过学习这篇文档，读者不仅可以了解如何在CentOS环境下配置Zookeeper集群，还能掌握一些基本的Zookeeper操作命令，这对于理解和使用Zookeeper进行分布式系统开发具有重要的实践价值。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值