zookeeper安装部署与常规操作

最新推荐文章于 2022-12-08 23:34:47 发布
最新推荐文章于 2022-12-08 23:34:47 发布
阅读量784 收藏 1
点赞数
分类专栏： zookeeper 文章标签： zookeeper安装部署
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_38414968/article/details/102922680
版权

zookeeper安装部署与常规操作

ZooKeeper是用于分布式应用程序的协调服务。它公开了一组简单的API，分布式应用程序可以基于这些API用于同步，节点状态、配置等信息、服务注册等信息。其由JAVA编写，支持JAVA 和C两种语言的客户端。

zookeeper 基于JAVA开发，下载后只要有对应JVM环境即可运行。其默认的端口号是2181运行前得保证其不冲突。

具体部署流程

下载地址：https://zookeeper.apache.org/releases.html#download

1、下载

https://mirrors.tuna.tsinghua.edu.cn/apache/zookeeper/zookeeper-3.5.5/apache-zookeeper-3.5.5-bin.tar.gz

查看已经下载的zookeeper压缩包：

[root@ecs-8f49 local]# ls
apache-zookeeper-3.5.5-bin.tar.gz  bootservice  etcinclude  lib64redis-3.2.9 redis-5  service  software  telescope  telescope_linux_amd64.tar.gz
bindockerNginx  games  lib  libexec  redis-3.2.9.tar.gz  sbin sharesrc   telescope_linux_amd64  telescope_linux_amd64.tar.gz.sha256
[root@ecs-8f49 local]#

2、解压

tar -zxvf apache-zookeeper-3.5.5-bin.tar.gz

查看解压后的zookeeper文件夹：

[root@ecs-8f49 local]# ls
apache-zookeeper-3.5.5-bin bin  dockerNginx  gamesliblibexec  redis-3.2.9.tar.gz  sbin share srctelescope_linux_amd64 telescope_linux_amd64.tar.gz.sha256
apache-zookeeper-3.5.5-bin.tar.gz  bootservice  etc  include  lib64  redis-3.2.9  redis-5 service  software  telescope  telescope_linux_amd64.tar.gz
[root@ecs-8f49 local]#

3、拷贝默认配置

进入zookeeper对应的conf目录下：

[root@ecs-8f49 local]# cd apache-zookeeper-3.5.5-bin/conf/
[root@ecs-8f49 conf]# ls
configuration.xsl  log4j.properties  zoo_sample.cfg
[root@ecs-8f49 conf]#

拷贝zoo_sample.cfg到当前目录一份命名为zoo.cfg：

[root@ecs-8f49 conf]# cp zoo_sample.cfg zoo.cfg
[root@ecs-8f49 conf]# ls
configuration.xsl  log4j.properties  zoo.cfg  zoo_sample.cfg
[root@ecs-8f49 conf]#

4、启动

进入zookeeper对应的bin目录下，运行./zkServer.sh start：

[root@ecs-8f49 bin]# ./zkServer.sh start
ZooKeeper JMX enabled by default
Using config: /usr/local/apache-zookeeper-3.5.5-bin/bin/../conf/zoo.cfg
Starting zookeeper ... STARTED

查看zookeeper默认端口(2181)：

[root@ecs-8f49 bin]# netstat -lpnt|grep 2181
tcp6   0  0 :::2181 :::*LISTEN  30379/java  
[root@ecs-8f49 bin]#

5、客户端访问

当前bin目录下的zkCli连接：

[root@ecs-8f49 bin]# ./zkCli.sh -server 127.0.0.1:2181
Connecting to 127.0.0.1:2181
......

ok

zookeeper配置文件的常规配置说明(zoo.cfg)

tickTime=2000 # zookeeper时间配置中的基本单位 (毫秒)
initLimit=10 # 允许follower初始化连接到leader最大时长，它表示tickTime时间倍数即:initLimit x tickTime
syncLimit=5 # 允许follower与leader数据同步最大时长,它表示tickTime时间倍数
dataDir=/tmp/zookeeper #zookeper 数据存储目录
clientPort=2181 #对客户端提供的端口号
maxClientCnxns=60 #单个客户端与zookeeper最大并发连接数
autopurge.snapRetainCount=3 # 保存的数据快照数量，之外的将会被清除
autopurge.purgeInterval=1 #自动触发清除任务时间间隔，小时为单位。默认为0，表示不自动清除

客户端基本命令

close #关闭当前会话
connect host:port #重新连接指定Zookeeper服务
create [-s] [-e] [-c] [-t ttl] path [data] [acl] #创建节点
delete [-v version] path #删除节点，(不能存在子节点）
deleteall path #删除路径及所有子节点
delquota [-n|-b] path #删除节点限额
get [-s] [-w] path #查看节点数据 -s 包含节点状态 -w 添加监听
getAcl [-s] path #查看节点ACL权限
history #查看执行的历史记录 
listquota path #查看节点限额
ls [-s] [-w] [-R] path #列出子节点 -s状态 -R 递归查看所有子节点 -w 添加监听
printwatches on|off #是否打印监听事件
quit #退出客户端
redo cmdno #重复 执行命令，history 中命令编号确定
removewatches path [-c|-d|-a] [-l] #删除指定监听
set [-s] [-v version] path data #设置值
setAcl [-s] [-v version] [-R] path acl #为节点设置ACL权限
setquota -n|-b val path #设置节点限额 -n 子节点数 -b 字节数
stat [-w] path #查看节点状态 -w 添加监听
sync path #强制同步节点

zookeeper节点介绍

zookeeper 中节点叫znode，存储结构上跟文件系统类似，以树形结构进行存储。不同之外在于znode没有目录的概念，不能执行类似cd之类的命令。znode结构包含如下：

  • path:唯一路径
  • childNode：子节点
  • stat:状态属性
  • type:节点类型

1、节点类型

  • 持久节点(PERSISTENT)
  • 持久序号节点(PERSISTENT_SEQUENTIAL)
  • 临时节点(不可再拥有子节点)(EPHEMERAL)
  • 临时序号节点(不可再拥有子节点)(EPHEMERAL_SEQUENTIAL)
持久节点

持久化保存的节点，也是默认创建的

[zk: localhost:2181(CONNECTED) 0] ls /
[zookeeper]
[zk: localhost:2181(CONNECTED) 1] create /zknode
Created /zknode
[zk: localhost:2181(CONNECTED) 2] ls /
[zknode, zookeeper]
[zk: localhost:2181(CONNECTED) 3]
持久序号节点(PERSISTENT_SEQUENTIAL)

创建时zookeeper 会在路径上加上序号作为后缀，。非常适合用于分布式锁、分布式选举等场景。创建时添加 -s 参数即可。

[zk: localhost:2181(CONNECTED) 3] create -s /zkSnode
Created /zkSnode0000000002
[zk: localhost:2181(CONNECTED) 4] ls /
[zkSnode0000000002, zknode, zookeeper]
[zk: localhost:2181(CONNECTED) 5] create -s /zkSnode
Created /zkSnode0000000003
[zk: localhost:2181(CONNECTED) 6] ls /
[zkSnode0000000002, zkSnode0000000003, zknode, zookeeper]
[zk: localhost:2181(CONNECTED) 7]
临时节点(不可再拥有子节点)(EPHEMERAL)

临时节点会在客户端会话断开后自动删除。适用于心跳，服务发现等场景。创建时添加参数-e 即可。

新建临时节点：

[zk: localhost:2181(CONNECTED) 7] create -e /zkEnode
Created /zkEnode
[zk: localhost:2181(CONNECTED) 8] ls /
[zkEnode, zkSnode0000000002, zkSnode0000000003, zknode, zookeeper]
[zk: localhost:2181(CONNECTED) 9]

断开连接再重新连接访问：

[zk: localhost:2181(CONNECTED) 0] ls /
[zkSnode0000000002, zkSnode0000000003, zknode, zookeeper]
[zk: localhost:2181(CONNECTED) 1]
临时序号节点(不可再拥有子节点)(EPHEMERAL_SEQUENTIAL)

与持久序号节点类似，不同之处在于EPHEMERAL_SEQUENTIAL是临时的会在会话断开后删除。创建时添加 -e -s

[zk: localhost:2181(CONNECTED) 1] create -e -s /zkESnode
Created /zkESnode0000000005
[zk: localhost:2181(CONNECTED) 2] ls /
[zkESnode0000000005, zkSnode0000000002, zkSnode0000000003, zknode, zookeeper]
[zk: localhost:2181(CONNECTED) 3]

2、节点的监听(watch)

客户添加 -w 参数可实时监听节点与子节点的变化，并且实时收到通知。非常适用保障分布式情况下的数据一至性。其使用方式如下：

ls -w path #监听子节点的变化（增，删）
get -w path #监听节点数据的变化
stat -w path #监听节点属性的变化
printwatches on|off #触发监听后，是否打印监听事件(默认on)

3、节点属性说明(stat)

查看节点属性：stat /zknode

[zk: localhost:2181(CONNECTED) 6] stat /zknode
cZxid = 0x17 #创建节点的事务ID
ctime = Tue Nov 05 18:55:28 CST 2019 #创建时间
mZxid = 0x17 #修改节点的事务ID
mtime = Tue Nov 05 18:55:28 CST 2019 #最后修改时间
pZxid = 0x17 #子节点变更的事务ID
cversion = 0 #这表示对此znode的子节点进行的更改次数（不包括子节点）
dataVersion = 0 #数据版本，变更次数
aclVersion = 0 #权限版本，变更次数
ephemeralOwner = 0x0 #临时节点所属会话ID（0x0表示此节点不是临时节点）
dataLength = 0 #数据长度
numChildren = 0 #子节点数(不包括子子节点)
[zk: localhost:2181(CONNECTED) 7]

4、权限设置(acl)

ACL全称为Access Control List（访问控制列表），用于控制资源的访问权限。
ZooKeeper使用ACL来控制对其znode的防问。基于scheme:id:permission的方式进行权限控制。scheme表示授权模式、id模式对应值、permission即具体的增删改权限位。

scheme:认证模型
  • world 开放模式，world表示全世界都可以访问（这是默认设置）
  • ip ip模式，限定客户端IP防问
  • auth 用户密码认证模式，只有在会话中添加了认证才可以防问
  • digest 与auth类似，区别在于auth用明文密码，而digest 用sha-1+base64加密后的密码。在实际使用中digest 更常见。
permission权限位
  • c CREATE 可以创建子节点
  • d DELETE 可以删除子节点（仅下一级节点）
  • r READ 可以读取节点数据及显示子节点列表
  • w WRITE 可以设置节点数据
  • a ADMIN 可以设置节点访问控制列表权限
语法示例

world权限示例

setAcl <path> world:anyone:<权限位>

IP权限示例

setAcl <path> ip:<ip地址|地址段>:<权限位>

auth模式示例

1. setAcl <path> auth:<用户名>:<密码>:<权限位>
2. addauth digest <用户名>:<密码>

digest 权限示例

1. setAcl <path> digest :<用户名>:<密钥>:<权限位>
2. addauth digest <用户名>:<密码>

注1：密钥 通过sha1与base64组合加密码生成，可通过以下命令生成
echo -n <用户名>:<密码> | openssl dgst -binary -sha1 | openssl base64

注2：为节点设置digest 权限后，访问前必须执行addauth，当前会话才可以防问。

设置digest 权限

#先 sha1 加密，然后base64加密
echo -n root:root | openssl dgst -binary -sha1 | openssl base64
#返回密钥
2Rz3ZtRZEs5RILjmwuXW/wT13Tk=
#设置digest权限
setAcl /zknode digest:luban:2Rz3ZtRZEs5RILjmwuXW/wT13Tk=:cdrw
只为伊人2232
关注
专栏目录
zookeeper安装配置与基本入门操作
weixin_42213903的博客
09-30 1188
1. zookeeper概要、背景及作用 2. 部署与常规配置 3. 节点类型
Zookeeper单节点模式与分布式集群模式安装部署演示
Easyhoon_w的博客
10-05 723
单节点模式部署 # 环境说明：本人使用的Java版本为jdk1.8.171,zookeeper版本为apache-zookeeper-3.5.5 安装及部署步骤： 创建一个zookeeper的文件存放目录，例如:mkdir /opt/bigdata 解压zookeeper安装包 tar -zxvf apache-zookeeper-3.5.5-bin.tar -C /opt/bigdata (在压...
telegraf-1.14.4_linux_amd64.tar.gz在centos7上安装步骤
zhanghaoninhao的博客
07-08 1149
1、下载压缩包：telegraf-1.14.4_linux_amd64.tar.gz 2、解压缩文件，命令如下： tar -zxvf telegraf-1.14.4_linux_amd64.tar.gz 解压后，生成三个目录：etc、usr、var 3、切换至运行目录 cd /…/usr/bin 生成配置文件 ./ telegraf config > telegraf.conf 在目录/…/usr/bin下生成一个配置文件 telegraf.conf 生成带cpu、memroy、http_list
zookeeper基本操作
小小唐僧的博客
12-08 1288
zookeeper基本操作
ElasticHD在linux下安装部署以及远程访问
fuck487的博客
08-16 7108
下载ElasticHD：https://github.com/360EntSecGroup-Skylar/ElasticHD/releases/ 作者在github有教如何部署运行 下载后，解压 unzip elasticHD_linux_amd64.zip 修改权限 chmod 0777 ElasticHD 运行 ./ElasticHD -p 127.0.0.1:98...
初识ZooKeeper-ZooKeeper常用命令行操作
热门推荐
qq_36014509的博客
08-30 1万+
目录 ZooKeeper特性 Session的基本原理 启动命令行操作 ls命令  ls2命令 stat命令 get命令 状态信息的含义 Create命令 set命令 delete命令 Watcher命令行 watcher机制 watcher简单使用 watcher父节点事件类型 watcher子节点事件类型 watcher使用场景 ACL（access con...
Zookeeper安装部署及使用
写的不好之处,请指教
12-10 5866
一、ZooKeeper概述 1.Zookeeper简介 （1）Zookeeper是一个分布式协调服务的开源框架。主要用来解决分布式集群中应用系统的一致性问题 （2）ZooKeeper本质上是一个分布式的小文件存储系统。提供基于类似于文件系统的目录树方式的数据存储，并且可以对树中的节点进行有效管理。从而用来维护和监控你存储的数据的状态变化。通过监控这些数据状态的变化，从而可以达到基于数据的集群...
zookeeper（一）部署与常规配置
core815的专栏
12-09 138
zookeeper基于JAVA开发，下载后只要有对应JVM环境即可运行。其默认的端口号是2181运行前得保证其不冲突。 版本说明： 2019年5月20日发行的3.5.5是3.5分支的第一个稳定版本。此版本被认为是3.4稳定分支的后续版本，可以用于生产。基于3.4它包含以下新功能： 动态重新配置 本地会议 新节点类型：容器，TTL 原子广播协议的SSL支持 删除观察者的能力 多线程提交处理器 升级...
Docker 安装zookeeper 集群
weixin_44627389的博客
11-07 2072
docker方式搭建zookeeper集群docker-compose
05-Hbase安装部署及优化.pdf
06-02
Hbase安装部署及优化知识点详细解析： 一、Hbase概述 Hbase是建立在Apache HDFS上的NoSQL分布式数据库系统。它具备高可靠性、高性能、列存储、可伸缩、实时读写等特点。Hbase支持海量数据的存储和处理，并且能够...
"深入理解zookeeper：节点特性与作用、部署与配置详解
在本文的第一课中，我们将详细介绍zookeeper的特性与节点说明，并对其部署和常规配置进行概述。本课程分为三个主题：zookeeper概要、背景及作用；部署与常规配置；节点类型。 一、zookeeper概要、背景及作用 ...
Hadoop环境搭建之zookeeper安装
Imflash的博客
09-08 1394
Hadoop环境搭建 一、预备知识 1.大数据导论 1.1 大数据概念 大数据（big data），指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。 最小的基本单位是bit，按顺序给出所有单位：bit、Byte、KB、MB、GB、TB、PB、EB、ZB、YB、BB、NB、DB...
基于java的智能卤菜销售平台答辩PPT.pptx
11-04
基于java的智能卤菜销售平台答辩PPT.pptx
Jira插件安装包custom-charts-jira-server
11-04
Jira插件安装包custom-charts-jira-server
安装与激活、靶场环境部署、扫描Web应用程序、扫描报告分析、Goby+AWVS联动
11-04
安装与激活 内容概要：详细介绍相关软件（如 Goby、AWVS 等）的安装步骤，包括从官方网站下载合适版本、检查系统兼容性、安装过程中的注意事项等。对于激活部分，讲解合法获取激活码或许可证的途径，以及激活过程中可能遇到的问题及解决方案。 适用人群：网络安全初学者、渗透测试工程师、安全运维人员等需要使用这些工具进行安全评估的人员。 使用场景和目标：在新搭建的测试环境或个人工作环境中，确保软件能正确安装和激活，为后续的安全评估工作做好准备。目标是使软件稳定运行，避免因安装或激活问题导致工作受阻。 靶场环境部署 内容概要：阐述靶场环境搭建的流程，包括选择合适的靶场平台（如 DVWA、WebGoat 等），安装和配置所需的操作系统、Web 服务器、数据库等组件，设置不同难度级别的漏洞场景。 适用人群：网络安全学习者用于实践练习，渗透测试培训讲师用于教学，安全研究人员用于新漏洞研究。 使用场景和目标：在安全培训、自我技能提升、新漏洞验证等场景下，搭建与真实环境相似的靶场，目标是模拟各种安全场景，帮助使用者熟悉漏洞利用和防御方法。 扫描 Web 应用程序 内容概要：讲解使用 Goby 和 AWVS
基于STM32的7路传感器三轮循迹小车源码+文档说明（高分毕设）
11-04
基于STM32的7路传感器三轮循迹小车源码+文档说明（高分毕设），含有代码注释，新手也可看懂，个人手打98分项目，导师非常认可的高分项目，毕业设计、期末大作业和课程设计高分必看，下载下来，简单部署，就可以使用。该项目可以直接作为毕设、期末大作业使用，代码都在里面，系统功能完善、界面美观、操作简单、功能齐全、管理便捷，具有很高的实际应用价值，项目都经过严格调试，确保可以运行！ 基于STM32的7路传感器三轮循迹小车源码+文档说明（高分毕设）基于STM32的7路传感器三轮循迹小车源码+文档说明（高分毕设）基于STM32的7路传感器三轮循迹小车源码+文档说明（高分毕设）基于STM32的7路传感器三轮循迹小车源码+文档说明（高分毕设）基于STM32的7路传感器三轮循迹小车源码+文档说明（高分毕设）基于STM32的7路传感器三轮循迹小车源码+文档说明（高分毕设）基于STM32的7路传感器三轮循迹小车源码+文档说明（高分毕设）基于STM32的7路传感器三轮循迹小车源码+文档说明（高分毕设）基于STM32的7路传感器三轮循迹小车源码+文档说明（高分毕设）基于STM32的7路传感器三轮循迹小车源码。
合并两个链表，链表基础操作
最新发布
11-04
链表 合并两个链表，链表基础操作
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值