Zookeeper学习笔记

最新推荐文章于 2024-02-29 18:14:18 发布
最新推荐文章于 2024-02-29 18:14:18 发布
阅读量141 收藏
点赞数
文章标签： java 运维 网络
原文链接：http://www.cnblogs.com/cocowool/p/zookeeper_notes.html
版权

目录

Zookeeper 介绍

Zookeeper是一个分布式应用程序协调服务，主要负责集中维护配置信息的服务，提供分布式的同步机制。其所有的服务都是做为其他分布式应用的基础。Zookeeper是Google Chubby的一个开源实现，是现在很多分布式应用的重要组件，包括诸如Hadoop、HBase、Kafka等，可以说现在Zookeeper是大家必须掌握的一门软件。

Zookeeper主要提供以下几种服务：
1、命名服务
2、配置管理
3、集群管理
4、分布式锁
5、队列管理

Zookeeper的特点

  • 简单：Zookeeper的核心是一个精简的文件系统，它支持一些简单的操作和一些抽象操作，例如，排序和通知。
  • 丰富：Zookeeper的原语操作是很丰富的，可实现一些协调数据结构和协议。例如，分布式队列、分布式锁和一组同级别节点中的“领导者选举”。
  • 高可用：Zookeeper支持集群模式，可以很容易的解决单点故障问题。
  • 松耦合式交互：不同进程间的交互不需要了解彼此，甚至可以不必同时存在，某进程在zookeeper中留下消息后，该进程结束后其它进程还可以读这条消息。
  • 资源库：Zookeeper实现了一个关于通用协调模式的开源共享存储库，能使开发者免于编写这类通用协议。

常用操作

为了熟悉Zookeeper的常用操作，最简单的办法就是使用Docker。

$ docker pull zookeeper
# 完成后启动zookeeper
$ docker run -p 2181:2181 zookeeper
# 重新打开一个Terminal界面，查找到当前容器的ID，登陆到容器中
$ docker ps
CONTAINER ID        IMAGE               COMMAND                  CREATED              STATUS              PORTS                                        NAMES
63c3aa117fca        zookeeper           "/docker-entrypoint.…"   About a minute ago   Up About a minute   2888/tcp, 0.0.0.0:2181->2181/tcp, 3888/tcp   infallible_saha
$ docker exec -it 63c3aa117fca bash

现在一个单机版的Zookeeper就运行起来了，可以尝试常用的命令了。

查看Server运行状态

bash-4.4# ./zkServer.sh status
ZooKeeper JMX enabled by default
Using config: /conf/zoo.cfg
Mode: standalone

客户端连接服务器

bash-4.4# ./zkCli.sh 
Connecting to localhost:2181

常用命令

  • 查看: ls
  • 获取节点数据和更新信息: get /zookeeper
[zk: localhost:2181(CONNECTED) 3] get /zookeeper

cZxid = 0x0
ctime = Thu Jan 01 00:00:00 GMT 1970
mZxid = 0x0
mtime = Thu Jan 01 00:00:00 GMT 1970
pZxid = 0x0
cversion = -1
dataVersion = 0
aclVersion = 0
ephemeralOwner = 0x0
dataLength = 0
numChildren = 1
  • 获取节点的更新信息: stat /zookeeper
  • 创建节点: craete [-s] [-e] path data acl，-s表示创建顺序节点，-e表示创建临时节点。
[zk: localhost:2181(CONNECTED) 6] create /spring hello
Created /spring
[zk: localhost:2181(CONNECTED) 9] get /spring
hello
cZxid = 0x4
ctime = Fri Apr 05 09:30:55 GMT 2019
mZxid = 0x4
mtime = Fri Apr 05 09:30:55 GMT 2019
pZxid = 0x4
cversion = 0
dataVersion = 0
aclVersion = 0
ephemeralOwner = 0x0
dataLength = 5
numChildren = 0
  • 修改节点: set path data [version]，可以看到dataVersion变成了1
[zk: localhost:2181(CONNECTED) 11] set /spring spring-v1
cZxid = 0x4
ctime = Fri Apr 05 09:30:55 GMT 2019
mZxid = 0x5
mtime = Fri Apr 05 09:34:19 GMT 2019
pZxid = 0x4
cversion = 0
dataVersion = 1
aclVersion = 0
ephemeralOwner = 0x0
dataLength = 9
numChildren = 0
  • 删除节点: delete path [version]
[zk: localhost:2181(CONNECTED) 17] delete /spring
[zk: localhost:2181(CONNECTED) 18] get /spring
Node does not exist: /spring
  • 设置watch事件: stat path [watch]
[zk: localhost:2181(CONNECTED) 33] stat /spring/bootx watch
Node does not exist: /spring/bootx
[zk: localhost:2181(CONNECTED) 34] create /spring/bootx bootx
Created /spring/bootx

WATCHER::
[zk: localhost:2181(CONNECTED) 35] 
WatchedEvent state:SyncConnected type:NodeCreated path:/spring/bootx
  • 设置watch事件: get path [watch]
[zk: localhost:2181(CONNECTED) 38] get /spring/booty watch
new-boot-y
cZxid = 0xc
ctime = Fri Apr 05 13:38:36 GMT 2019
mZxid = 0xd
mtime = Fri Apr 05 13:38:48 GMT 2019
pZxid = 0xc
cversion = 0
dataVersion = 1
aclVersion = 0
ephemeralOwner = 0x0
dataLength = 10
numChildren = 0
[zk: localhost:2181(CONNECTED) 39] set /spring/booty nnew-boot-y

WATCHER::

WatchedEvent state:SyncConnected type:NodeDataChanged path:/spring/booty
cZxid = 0xc
ctime = Fri Apr 05 13:38:36 GMT 2019
mZxid = 0xe
mtime = Fri Apr 05 13:39:26 GMT 2019
pZxid = 0xc
cversion = 0
dataVersion = 2
aclVersion = 0
ephemeralOwner = 0x0
dataLength = 11
numChildren = 0
  • xxxx
  • xxxx

ACL权限

ZK的节点有5种操作权限：CREATE、READ、WRITE、DELETE、ADMIN 也就是 增、删、改、查、管理权限。

注：这5种权限中，delete是指对子节点的删除权限，其它4种权限指对自身节点的操作权限。

身份的认证有4种方式：

  • world：默认方式，相当于全世界都能访问
  • auth：代表已经认证通过的用户(cli中可以通过addauth digest user:pwd 来添加当前上下文中的授权用户)
  • digest：即用户名:密码这种方式认证，这也是业务系统中最常用的
  • ip：使用Ip地址认证
[zk: localhost:2181(CONNECTED) 42] getAcl /spring
'world,'anyone
: cdrwa
[zk: localhost:2181(CONNECTED) 43] getAcl /zookeeper
'world,'anyone
: cdrwa

四字命令

ZooKeeper 支持某些特定的四字命令字母与其的交互。它们大多是查询命令，用来获取 ZooKeeper 服务的当前状态及相关信息。用户在客户端可以通过 telnet 或 nc 向 ZooKeeper 提交相应的命令。 ZooKeeper 常用四字命令如下表所示。

Zookeeper四字命令功能描述
conf输出相关服务配置的详细信息。
cons列出所有连接到服务器的客户端的完全的连接 / 会话的详细信息。包括“接受 / 发送”的包数量、会话 id 、操作延迟、最后的操作执行等等信息。
dump列出未经处理的会话和临时节点。
envi输出关于服务环境的详细信息（区别于 conf 命令）。
reqs列出未经处理的请求
ruok测试服务是否处于正确状态。如果确实如此，那么服务返回“ imok ”，否则不做任何相应。
stat输出关于性能和连接的客户端的列表。
wchs列出服务器 watch 的详细信息。
wchc通过 session 列出服务器 watch 的详细信息，它的输出是一个与 watch 相关的会话的列表。
wchp通过路径列出服务器 watch 的详细信息。它输出一个与 session 相关的路径。

使用方法

$ echo stat | nc 127.0.0.1 2181
Zookeeper version: 3.4.13-2d71af4dbe22557fda74f9a9b4309b15a7487f03, built on 06/29/2018 04:05 GMT
Clients:
 /172.17.0.1:53548[0](queued=0,recved=1,sent=0)
 /127.0.0.1:56306[1](queued=0,recved=483,sent=485)

Latency min/avg/max: 0/0/45
Received: 500
Sent: 501
Connections: 2
Outstanding: 0
Zxid: 0xe
Mode: standalone
Node count: 8

参考资料

  1. Apache Zookeeper
  2. 百度百科 Zookeeper
  3. Zookeeper的功能以及工作原理
  4. Zookeeper系列一：Zookeeper基础命令操作
  5. ZooKeeper系列之六：ZooKeeper四字命令

转载于:https://www.cnblogs.com/cocowool/p/zookeeper_notes.html

aifeier1982
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
zookeeper学习笔记
01-18
zookeeper学习笔记
docker 安装zookeeper
qq_38782460的博客
10-09 2157
自己玩
Docker部署ZooKeeper服务【实战】(最详细教程，单主机)
qq_58221659的博客
07-18 2729
好了，到这里【centos7使用docker部署zookeeper服务】就结束了，想看idea一键部署项目到docker容器以及集群部署zookeeper教程请前往主页查看相关文章，后续我会持续更新更多的优质教程，敬请期待！能成功进入到容器，则已经启动。停止容器：docker stop 容器名称，如docker stop zk1。查看日志：docker logs 容器名称，如docker logs zk1。重启容器：docker restart 容器名称。删除容器：docker rm 容器名称。
Docker基础：搭建zookeeper集群
ReturnTmp的博客
07-14 2709
官方网站：Docker Hub拉取镜像：[root@localhost user]# docker pull zookeeper查看镜像元数据：docker search zookeeper 新建brige网络 2.创建容器并加入网络 查看节点状态 集群生成脚本 借鉴大佬博客：docker 搭建 zookeeper 集群_颹蕭蕭的博客-CSDN博客_docker搭建zookeeper集群......
【ZooKeeper 】安装和使用，以及java客户端
最新发布
2301_79456272的博客
02-29 1176
这篇文章简单给演示一下 ZooKeeper 常见命令的使用以及 ZooKeeper Java客户端 Curator 的基本使用。介绍到的内容都是最基本的操作，能满足日常工作的基本需要。如果文章有任何需要改善和完善的地方，欢迎在评论区指出，共同进步！
Docker下的zookeeper集群
qq_59975945的博客
02-24 913
在之前的文章中，我们已经完成了zookeeper镜像的拉取，并且成功创建了单结点的zookeeper的kafka,storm集群，那么在本篇文章中我将介绍通过Docker搭建zookeeper集群，那么为什么使用zookeeper集群呢，我们之前用单结点来部署不是也能够成功吗？单节点的ZooKeeper是指只有一个ZooKeeper服务器在运行的情况。它的优点是部署简单，占用较少的资源。对于小规模应用或测试环境，单节点的ZooKeeper可以满足需求。然而，单节点的ZooKeeper也存在一些缺点。
Zookeeper学习笔记.docx
03-27
ZooKeeper 学习笔记 ZooKeeper 是一个开源的分布式协调服务，由 Hadoop 的创始人 Doug Cutting 等人开发。它为分布式应用提供了一个高效、可靠的协调机制，帮助开发者快速构建高可用、可扩展的分布式系统。 ...
ZooKeeper学习笔记
03-14
java ZooKeeper学习笔记\ZooKeeper原理、运用
Zookeeper学习笔记.pdf
09-10
ZooKeeper是一种为分布式应用所设计的高可用、高性能且一致的开源协调服务，它提供了一项基本服务：**分布式锁服务**。由于ZooKeeper的开源特性，后来我们的开发者在分布式锁的基础上，摸索了出了其他的使用方法：**...
Zookeeper与Docker的集成与应用
禅与计算机程序设计艺术
01-25 967
1.背景介绍 1. 背景介绍 Zookeeper 和 Docker 都是现代分布式系统中广泛应用的技术。Zookeeper 是一个开源的分布式协调服务，用于提供一致性、可靠性和原子性等服务。Docker 是一个开源的应用容器引擎，用于打包和运行应用程序，以实现轻量级、可移植的应用部署。 在现代分布式系统中，Zookeeper 和 Docker 的集成和应用具有重要意义。Zookeeper 可...
docker概念、组成、架构&dubbo和zookeeper的关系&zookeeper概念、调用&dubbo概念、作用和dubbo的节点、调用关系
m0_45899013的博客
06-22 1010
官方定义： Docker 是一个开源的应用容器引擎，让开发者可以打包他们的应用以及依赖包到一个可移植的镜像中，然后发布到任何流行的 Linux或Windows 机器上，也可以实现虚拟化。容器是完全使用沙箱机制，相互之间不会有任何接口。 一个完整的Docker有4个部分组成： DockerClient客户端 Docker Daemon守护进程 Docker Image镜像 DockerContainer容器 ...
Zookeeper与Docker集成与应用
禅与计算机程序设计艺术
01-28 828
1.背景介绍 1. 背景介绍 Zookeeper和Docker都是现代分布式系统中广泛应用的技术。Zookeeper是一个开源的分布式协调服务，用于构建分布式应用程序的基础设施。Docker是一个开源的应用程序容器引擎，用于打包和运行应用程序，以及管理和部署容器。 在现代分布式系统中，Zookeeper和Docker的集成和应用具有重要意义。Zookeeper可以用于管理Docker集群的元...
Docker实战之Zookeeper集群
cuishiying的专栏
03-03 328
1. 概述 这里是 Docker 实战系列第四篇。主要介绍分布式系统中的元老级组件 Zookeeper。 ZooKeeper 是一个开源的分布式协调服务，是 Hadoop，HBase 和其他分布式框架使用的有组织服务的标准。 分布式应用程序可以基于 ZooKeeper 实现诸如数据发布/订阅、负载均衡、命名服务、分布式协调/通知、集群管理、Master 选举、分布式锁和分布式队列等功能。 读过 D...
docker连接Zookeeper的坑~
LY的专栏
03-13 1万+
昨天的项目上发现了一个zookeeper的连接问题，服务是在docker上部署运行的，管理redis集群的codis使用zookeeper来管理，服务实例化时，添加codis-proxy卡住，超时后自动重启。zookeeper日志报错如下：WARN  [NIOServerCxn.Factory:0.0.0.0/0.0.0.0:2181:NIOServerCnxn@357] - caught end...
docker 容器配置之Zookeeper
Jecci
12-25 4777
#查看network 网络 docker network ls #删除一个网络 docker network rm net #新建一个网络 docker network create prod docker run --name app-1 --net prod --rm -it centos /bin/sh docker run --name app-2 --net prod --rm -i...
docker 应用 —— docker安装zookeeper单机版
猎人在吃肉
12-16 2万+
1、查看zookeeper镜像 执行命令 docker search zookeeper ： [root@iz2zei0x4t16rv0e5buzvhz /]# docker search zookeeper NAME DESCRIPTION STARS ...
Docker安装Zookeeper并进行操作
热门推荐
Radom&7
07-02 6万+
Docker安装Zookeeper 下载Zookeeper镜像 docker pull zookeeper 启动容器并添加映射 docker run --privileged=true -d --name zookeeper --publish 2181:2181 -d zookeeper:latest 查看容器是否启动 docker ps idea提供了一个Zoo...
kafka删除topic时出现Error while executing topic command : Topic helloword does not exist on ZK path local
weixin_42369418的博客
11-25 3300
截图事例： 先查看topic： HelloWor、HelloWorld、test。这三个是我之前创建的。 我想删掉HelloWor。结果出现错误。 报错如下： 解决：topic名字打错了，导致zk找不到对应的topic。 ...
zookeeper学习
10-10
学习 ZooKeeper 可以帮助你理解分布式系统的原理和实现。 首先，你可以了解 ZooKeeper 的基本概念和架构。ZooKeeper 采用了主从架构，由一个 Leader 和多个 Follower 组成。Leader 负责处理客户端请求，Follower ...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值