zookeeper入门到实战-阶段二(常用命令的使用)

最新推荐文章于 2024-09-30 21:44:26 发布
最新推荐文章于 2024-09-30 21:44:26 发布
阅读量488 收藏
点赞数
分类专栏： ZooKeeper 文章标签： 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/S1124654/article/details/125577969
版权

Zookeeper常用Shell命令

节点增删改查

#连接服务 不指定服务地址则默认连接到localhost:2181
zkCli.sh -server hadoop102:2181

help命令

使用 help 可以查看所有命令及格式。

ZooKeeper -server host:port -client-configuration properties-file cmd args
        addWatch [-m mode] path # optional mode is one of [PERSISTENT, PERSISTENT_RECURSIVE] - default is PERSISTENT_RECURSIVE
        addauth scheme auth
        close
        config [-c] [-w] [-s]
        connect host:port
        create [-s] [-e] [-c] [-t ttl] path [data] [acl]
        delete [-v version] path
        deleteall path [-b batch size]
        delquota [-n|-b] path
        get [-s] [-w] path
        getAcl [-s] path
        getAllChildrenNumber path
        getEphemerals path
        history
        listquota path
        ls [-s] [-w] [-R] path
        printwatches on|off
        quit
        reconfig [-s] [-v version] [[-file path] | [-members serverID=host:port1:port2;port3[,...]*]] | [-add serverId=host:port1:port2;port3[,...]]* [-remove serverId[,...]*]
        redo cmdno
        removewatches path [-c|-d|-a] [-l]
        set [-s] [-v version] path data
        setAcl [-s] [-v version] [-R] path acl
        setquota -n|-b val path
        stat [-w] path
        sync path
        version

查看节点列表

查看节点列表有 ls path 和 ls -s path 两个命令，后者是前者的增强，不仅可以查看指定路径下的所有节点，还可以查看当前节点的信息。

[zk: localhost:2181(CONNECTED) 0] ls /
[zk: localhost:2181(CONNECTED) 1] ls -s /
[a0000000001, b0000000002, c0000000003, hadoop, zookeeper]
cZxid = 0x0
ctime = Thu Jan 01 08:00:00 CST 1970
mZxid = 0x0
mtime = Thu Jan 01 08:00:00 CST 1970
pZxid = 0x300000011
cversion = 9
dataVersion = 0
aclVersion = 0
ephemeralOwner = 0x0
dataLength = 0
numChildren = 7

节点信息
每个 ZNode 节点在存储数据的同时，都会维护一个叫做 Stat 的数据结构，里面存储了关于该节点的全部状态信息。如下：

状态属性说明
czxid数据节点创建时的事务 ID
ctime数据节点创建时的时间
mzxid数据节点最后一次更新时的事务 ID
mtime数据节点最后一次更新时的时间
pzxid数据节点的子节点最后一次被修改时的事务 ID
cversion子节点的更改次数
version节点数据的更改次数
aversion节点的 ACL 的更改次数
ephemeralOwner如果节点是临时节点，则表示创建该节点的会话的 SessionID；如果节点是持久节点，则该属性值为 0
dataLength数据内容的长度
numChildren数据节点当前的子节点个数

新增节点 

create [-s] [-e] [-c] [-t ttl] path [data] [acl]   #其中-s 为有序节点，-e 临时节点

创建节点并写入数据：

create /hadoop 123456

创建有序节点，此时创建的节点名为指定节点名 + 自增序号：

[zk: localhost:2181(CONNECTED) 23] create -s /a  "aaa"
Created /a0000000022
[zk: localhost:2181(CONNECTED) 24] create -s /b  "bbb"
Created /b0000000023
[zk: localhost:2181(CONNECTED) 25] create -s /c  "ccc"
Created /c0000000024

创建临时节点，临时节点会在会话过期后被删除：

[zk: localhost:2181(CONNECTED) 26] create -e /tmp  "tmp"
Created /tmp

查看节点

获取节点数据

# 格式
# get [-s] [-w] path
[zk: localhost:2181(CONNECTED) 24] get -s -w /hadoop
123456
cZxid = 0x200000002
ctime = Sat Nov 12 17:08:09 CST 2020
mZxid = 0x200000002
mtime = Sat Nov 12 17:08:09 CST 2020
pZxid = 0x200000002
cversion = 0
dataVersion = 0
aclVersion = 0
ephemeralOwner = 0x0
dataLength = 6
numChildren = 0

[zk: localhost:2181(CONNECTED) 25] get -s -w /tmp
tmp
cZxid = 0x200000006
ctime = Sat Nov 12 17:10:45 CST 2021
mZxid = 0x200000006
mtime = Sat Nov 12 17:10:45 CST 2021
pZxid = 0x200000006
cversion = 0
dataVersion = 0
aclVersion = 0
ephemeralOwner = 0x1000251b9bb0000
dataLength = 3
numChildren = 0

查看节点状态

可以使用 stat 命令查看节点状态，它的返回值和 get 命令类似，但不会返回节点数据。

[zk: localhost:2181(CONNECTED) 32] stat /hadoop
cZxid = 0x14b
ctime = Fri May 24 17:03:06 CST 2019
mZxid = 0x14b
mtime = Fri May 24 17:03:06 CST 2019
pZxid = 0x14b
cversion = 0
dataVersion = 0
aclVersion = 0
ephemeralOwner = 0x0
dataLength = 6
numChildren = 0

更新节点

更新节点的命令是 set，可以直接进行修改，如下：

[zk: localhost:2181(CONNECTED) 33] set /hadoop 345
cZxid = 0x14b
ctime = Fri May 24 17:03:06 CST 2019
mZxid = 0x14c
mtime = Fri May 24 17:13:05 CST 2019
pZxid = 0x14b
cversion = 0
dataVersion = 1  # 注意更改后此时版本号为 1，默认创建时为 0
aclVersion = 0
ephemeralOwner = 0x0
dataLength = 3
numChildren = 0

也可以基于版本号进行更改，此时类似于乐观锁机制，当你传入的数据版本号 (dataVersion) 和当前节点的数据版本号不符合时，zookeeper 会拒绝本次修改：

[zk: localhost:2181(CONNECTED) 34] set  -v 0 /hadoop 678
version No is not valid : /hadoop  #无效的版本号

删除节点

删除节点的语法如下：

delete path -v [version]

和更新节点数据一样，也可以传入版本号，当你传入的数据版本号 (dataVersion) 和当前节点的数据版本号不符合时，zookeeper 不会执行删除操作。

[zk: localhost:2181(CONNECTED) 35] delete /hadoop -v 0
version No is not valid : /hadoop
[zk: localhost:2181(CONNECTED) 36] delete /hadoop

要想删除某个节点及其所有后代节点，可以使用递归删除，命令为 rmr path。

监听器

get [-w] path

使用 get [-w] path 注册的监听器能够在节点内容发生改变的时候，向客户端发出通知。需要注意的是 zookeeper 的触发器是一次性的 (One-time trigger)，即触发一次后就会立即失效。

[zk: localhost:2181(CONNECTED) 4] get -w /hadoop
[zk: localhost:2181(CONNECTED) 5] set /hadoop 456

WATCHER::

WatchedEvent state:SyncConnected type:NodeDataChanged path:/hadoop

stat [-w] path

使用 stat [-w] path 注册的监听器能够在节点状态发生改变的时候，向客户端发出通知。

[zk: localhost:2181(CONNECTED) 7] stat -w /hadoop
[zk: localhost:2181(CONNECTED) 8] set /hadoop 112233
WATCHER::

WatchedEvent state:SyncConnected type:NodeDataChanged path:/hadoop

 ls [-s] [-w] [-R] path

使用 ls [-s] [-w] -R path 注册的监听器能够监听该节点下所有子节点的增加和删除操作。

[zk: localhost:2181(CONNECTED) 9] ls -w -R /hadoop
[]
[zk: localhost:2181(CONNECTED) 10] create  /hadoop/yarn "aaa"
WATCHER::

WatchedEvent state:SyncConnected type:NodeChildrenChanged path:/hadoop

zookeeper 四字命令

命令功能描述
conf打印有关服务配置的详细信息。
cons列出连接到此服务器的所有客户端的完整连接/会话详细信息。包括有关接收/发送的数据包数量、会话 ID、操作延迟、上次执行的操作等信息...
crst重置所有连接的连接/会话统计信息。
dump列出未完成的会话和临时节点。
envi打印有关服务环境的详细信息
ruok测试服务器是否在非错误状态下运行。如果服务器正在运行，它将以 imok 响应。否则它根本不会响应。“imok”响应并不一定表示服务器已加入仲裁，只是服务器进程处于活动状态并绑定到指定的客户端端口。使用“stat”获取有关状态wrt quorum和客户端连接信息的详细信息。
srst重置服务器统计信息。
srvr列出服务器的完整详细信息。
stat列出服务器和连接客户端的简要详细信息。
wchs列出有关服务器监视的简要信息。
wchc按会话列出有关服务器监视的详细信息。这将输出具有关联手表（路径）的会话（连接）列表。请注意，根据观察次数，此操作可能会很昂贵（即影响服务器性能），请谨慎使用。
dirs以字节为单位显示快照和日志文件的总大小
wchp按路径列出有关服务器监视的详细信息。这将输出具有关联会话的路径（znode）列表。请注意，根据观察次数，此操作可能会很昂贵（即影响服务器性能），请谨慎使用。
mntr输出可用于监控集群健康状况的变量列表。
isro测试服务器是否以只读模式运行。如果处于只读模式，服务器将响应“ro”，如果不是只读模式，则响应“rw”。
hash返回与 zxid 关联的树摘要的最新历史记录。
gtmk以十进制格式的 64 位有符号长值形式获取当前跟踪掩码。有关stmk可能值的说明，请参见。
stmk设置当前跟踪掩码。跟踪掩码是 64 位，其中每一位启用或禁用服务器上特定类别的跟踪日志记录。Log4J 必须首先配置为启用TRACE级别才能查看跟踪日志消息。跟踪掩码的位对应于以下跟踪记录类别。

更多四字命令可以参阅官方文档：ZooKeeper: Because Coordinating Distributed Systems is a Zoo 

使用前需要使用 sudo yum install nc 安装 nc 命令，使用示例如下：

[bigdata@hadoop102 ~]# echo stat | nc localhost 2181
Zookeeper version: 3.4.13-2d71af4dbe22557fda74f9a9b4309b15a7487f03, 
built on 06/29/2018 04:05 GMT
Clients:
 /0:0:0:0:0:0:0:1:50584[1](queued=0,recved=371,sent=371)
 /0:0:0:0:0:0:0:1:50656[0](queued=0,recved=1,sent=0)
Latency min/avg/max: 0/0/19
Received: 372
Sent: 371
Connections: 2
Outstanding: 0
Zxid: 0x150
Mode: standalone
Node count: 167
[bigdata@hadoop102 ~]$ echo stat | nc localhost 2181
stat is not executed because it is not in the whitelist.
  • 若如上提示 指令不在白名单中，则需要修改$ZK_HOME/conf/zoo.cfg
vim $ZK_HOME/conf/zoo.cfg

# 将需要的命令添加到白名单中
4lw.commands.whitelist=stat, ruok, conf, isro

# 将所有命令添加到白名单中
4lw.commands.whitelist=*
  • node01修改后将文件同步至其他节点
  • 重启zookeeper
工作变成艺术
关注
专栏目录
大数据Hadoop实战篇
需要远程指导仿真实验、代码有问题的，请后台私信或者关注公众号
06-04 7641
大数据Hadoop实战，10分钟带你入门Hadoop，手把手教你搭建分布式集群系统
第一课 大数据技术之Fink1.13的实战学习-部署使用和基础概念
QnHyn
06-11 1852
Flink
zookeeper命令详解
Intelligebce的博客
06-19 969
一、create命令    创建Zookeeper节点，即创建Znode   格式：        create [-s] [-e] path data acl        [-e]表示节点是presist，默认为persist        [-s]表示节点为sequential        acl是权限控制参数，缺省时不做任何权限控制。           二、ls命令          ...
ZooKeeper之常用命令大全
Java追求者的博客
06-06 3522
1. Linux开启客户端使用的命令 ./zkCli.sh [root@centos7 bin]# ./zkCli.sh .......... [zk: localhost:2181(CONNECTED) 0] 2. ls与ls2的区别 ls：是只查看节点 ls2；是查看节点和状态信息，新版本zookeeper使用命令：`ls -s path` 取代ls2命令。 [zk: localhost:2181(CONNECTED) 7] ls / [zookeeper] [zk: localhost:21
详解zookeeper四字命令
最新发布
小诸葛的博客
09-30 1222
ZooKeeper 的四字命令（Four-Letter Words, 4LW）是一组简单的管理和监控命令，方便运维人员快速获取 ZooKeeper 集群和节点的运行状态。这些命令通常用于健康检查、性能监控、节点配置查看等操作。通过这些命令，可以轻松获取关于 ZooKeeper 服务的关键信息。四字命令可以通过 TCP 连接直接向 ZooKeeper 服务器发送请求，ZooKeeper 服务会返回相应的状态信息。这些命令只接受四个字母输入，故称为“四字命令”。
ZooKeeper命令和监控详解
吴代庄的博客
03-15 2764
通过以上介绍的ZooKeeper命令，我们可以方便地查看ZooKeeper服务器的各种信息，从而更好地监控和管理ZooKeeper。在实际使用中，我们可以根据需要选择适当的命令进行监控。同时，我们还可以通过编写脚本或使用第三方监控工具，定期执行这些命令并将结果发送到指定的邮箱或监控系统，以实现自动化监控。
【大数据】Zookeeper 客户端的命令行操作
书山有路，学海无涯。记录成长，追逐梦想
01-06 1767
我们已经搭建好了 Zookeeper 集群，接下来就是启动客户端，在里面输入增删改查相关的命令，然后发送给服务端执行，就类似于 Redis 一样。
zookeeper四字命令提示命令不在白名单中
闲鱼的博客
06-19 6354
问题描述 在执行zookeeper的四字命令时，命令行报出如下错误： 问题解决 在zoo.cfg文件末尾添加如下内容即可： # 将需要的命令添加到白名单中 4lw.commands.whitelist=stat, ruok, conf, isro # 将所有命令添加到白名单中 4lw.commands.whitelist=* 重启服务 zkServer.sh restart ...
Zookeeper四字监控命令使用总结
weixiaohuai的博客
02-12 4601
一、概述 zooKeeper支持某些特定的四字命令与其的交互。它们大多是查询命令，用来获取 zooKeeper服务的当前状态及相关信息。用户在客户端可以通过 telnet 或 nc 向zooKeeper提交相应的命令。 zooKeeper常用四字命令如下： conf：输出相关服务配置的详细信息。比如端口、zk数据及日志配置路径、最大连接数，session超时时间、serverId等 cons：列出所有连接到这台服务器的客户端连接/会话的详细信息。包括“接受/发送”的包数量、session id 、操
Kafka入门到精通
shuai_h的博客
07-10 3671
Kafka是由Apache软件基金会开发的一个开源流平台，由Scala和Java编写。Kafka的Apache官网是这样介绍Kakfa的。Apache Kafka是一个分布式流平台。发布和订阅流数据流，类似于消息队列或者是企业消息传递系统以容错的持久化方式存储数据流处理数据流Publish and subscribe：发布与订阅Store：存储Process：处理特性。
Hadoop大数据处理实战：从入门到精通
[Hadoop大数据处理实战：从入门到精通](https://img-blog.csdnimg.cn/img_convert/7638384be10ef3c89bbf9ea8e009f7f6.png) # 1. Hadoop基础与架构 Hadoop是一个开源分布式处理框架，用于存储和处理海量数据。它由...
十分钟入门RocketMQ，以及入门消息实战
尼尧Nier的博客
06-25 1165
RocketMQ是由阿里自主研发、开源的一款高性能、高吞吐量的分布式消息中间件，使用Java语言进行开发。在2017年9月份由Apach接收，成为 Apache 顶级项目之一，是当前分布式场景下常用的消息队列中间件之一。 接下来本篇文主要是对RocketMQ进行一个简单的介绍，让大家可以快速（十分钟）入门。并把单机版实战例子的过程和其中遇到的坑都在本文写到。 十分钟入门RocketMQ，以及入门消息实战十分钟入门RocketMQRocketMQ 是什么RocketMQ的构成RocketMQ 物理部署结构R
zookeeper特性与节点说明（一）
ex-huh001的博客
09-27 620
1.zookeeper概要 ZooKeeper是用于分布式应用程序的协调服务。它公开了一组简单的API，分布式应用程序可以基于这些API用于同步，节点状态、配置等信息、服务注册等信息。其由JAVA编写，支持JAVA 和C两种语言的客户端。 znode节点 zookeeper 中数据基本单元叫节点，节点之下可包含子节点，最后以树级方式程现。每个节点拥有唯一的路径path。客户端基于PATH上传节点...
Zookeeper ZNode Stat对象信息解析
恐龙弟旺仔的博客
06-19 836
Zookeeper的视图结构和标准的UNIX文件系统类似，整个结构也是以树形目录结构展现的。Zookeeper中的每个节点称为ZNode，每个ZNode上既可以保存数据，也可以挂载子节点。关于ZNode，不仅可以存储数据，节点本身也有一些状态信息（Stat），本文就来分析下这个Stat信息。我们随意创建一个节点，可以使用Zookeeper客户端命令，如下所示： 我们来逐个看下这些参数的含义cZxid即create zxid的缩写（创建该节点的事务ID），每一次事务操作都会有一个特定的zxid来代表当前事
ZooKeeper 实战(二) 命令行操作篇
AHAO的博客
01-08 1942
ZooKeeper允许用户在指定Znode注册 Watcher（绑定监听事件），当特定事件触发时（节点数据变更、节点删除、子节点状态变更等事件），ZooKeeper服务端会将事件通知到注册过该事件Watcher的客户端，该机制是ZooKeeper实现分布式协调服务的重要特性，通过这个事件机制，可以基于ZooKeeper实现分布式锁、集群管理等功能。id表示 用户名:密码。如下所示，是整个acl表达式的形式，除去验证模式和权限控制剩下的，也就是中间内容表示id。：监听节点数据变化，子节点的数据变化不会触发。
二、zookeeper客户端使用和集群特性
小强同志的博客
01-29 734
内容梗概： 客户端 zookeeper客户端简介，C客户端 客户端连接参数说明 客户端CRUD 客户端监听 集群 集群架构说明 集群配置及参数说明 选举投票机制 主从复制机制 一、客户端API常规应用 zookeeper 提供了java与C两种语言的客户端。本次介绍java客户端。引入最新的maven依赖： <dependency> <groupId>org.apache.zookeeper</groupId>
【zookeeper】zookeeper监控指标查看
margu_168的博客
09-01 2424
日常工作中，我们有时候需要对zookeeper集群的状态进行检查，下面分享一些常用的方法。上述两种方式获取的指标大体上一样的。
Zookeeper 基础学习
sekever的博客
05-07 414
最后，我们得出结论，ZK 提供分布式协同服务，解决出现在分布式系统中出现的一系列问题，它的设计目标是将那些复杂且容易出错的分布式一致性服务封装起来，构成一个高效可靠的原语集，并以一系列简单易用的接口提供给用户使用。作为dubbo的注册中心使用，每个服务器创建临时节点，里面存放可提供的服务，web网页作为客户端连接zookeeper，在需要时查找自己想要的服务，将服务器的IP、方法等信息存放到自己的缓存中。而且更重要的是，路径是我们可以自己定义的，这对于我们对有些有语意的对象的ID设置可以更加便于理解。...
Zookeeper操作指南
陌然的博客
06-02 1254
zookeeper指南部署和管理指南·部署o系统需求§支持的平台§所需软件o群集(多服务器)设置o单一服务器和开发人员设置·管理o设计zook...
Zookeeper-3.3.5源码解析：入门到实战
16. **应用场景**：包括统一命名服务、配置管理、集群管理、共享锁、队列管理、障碍墙、双重障碍墙、互斥锁、读写锁、可恢复的读写锁和二阶段提交等。 此文档详细介绍了Zookeeper的核心概念和技术细节，对于理解和...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

工作变成艺术

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值