【Zookeeper centos8 + zookeeper 3.7.0 环境安装】

最新推荐文章于 2024-05-16 19:21:42 发布
最新推荐文章于 2024-05-16 19:21:42 发布
阅读量5.5k 收藏 1
点赞数
分类专栏： 微服务 文章标签： linux zookeeper apache
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/yin18827152962/article/details/122096066
版权

准备环境

centos8 + jdk8 (linux环境已经提前搭建好了)

zookeeper使用版本版本: zookeeper-3.7.0

下载zk

http://zookeeper.apache.org
在这里插入图片描述

Apache ZooKeeper
在这里插入图片描述

Apache Downloads

下载链接: https://dlcdn.apache.org/zookeeper/zookeeper-3.7.0/apache-zookeeper-3.7.0-bin.tar.gz

准备三台虚拟机

192.168.71.134

192.168.71.128

192.168.71.135

安装位置: ~

开始安装

上传文件

rz -E

解压

# 解压
tar -xzvf apache-zookeeper-3.7.0-bin.tar.gz
# 重命名
mv apache-zookeeper-3.7.0-bin zookeeper-3.7.0-bin

命令积累:

ctrl+u ctrl+k 分别代表光标处往前和光标处往后删除

ctrl+a ctrl+e 分别代表把管标移动到最前和最后

ctrl+ c : Linux 快速删除已输入的命令 (xshell 无效)

xshell清理屏幕: ctrl+l或ctrl+shift+l(还留有历史记录)

ctrl+shift+a(删除了历史缓冲区记录)

配置

zoo.cfg配置

[root@localhost ~]# cd zookeeper-3.7.0-bin/conf/
[root@localhost conf]# ls
configuration.xsl  log4j.properties  zoo_sample.cfg
[root@localhost conf]# cp zoo_sample.cfg zoo.cfg
tickTime=2000
initLimit=10
syncLimit=5
clientPort=2181
dataDir=/root/zookeeper-3.7.0-bin/data
dataLogDir=/root/zookeeper-3.7.0-bin/log

server.1=192.168.71.134:2888:3888
server.2=192.168.71.128:2888:3888
server.3=192.168.71.135:2888:3888
: wq

配置如下

tickTime=2000
initLimit=10
syncLimit=5
clientPort=2181
dataDir=/root/zookeeper-3.7.0-bin/data
dataLogDir=/root/zookeeper-3.7.0-bin/log

server.1=192.168.71.134:2888:3888
server.2=192.168.71.128:2888:3888
server.3=192.168.71.135:2888:3888

说明:

2181: 是zookeeper对外服务的端口

2888: 是各个节点的通信端口

3888: 是leader崩溃后的选举端口

myid配置

[root@localhost conf]# cd ../
[root@localhost zookeeper-3.7.0-bin]# ls
bin  conf  docs  lib  LICENSE.txt  NOTICE.txt  README.md  README_packaging.md
root@localhost zookeeper-3.7.0-bin]# mkdir data log
[root@localhost zookeeper-3.7.0-bin]# ls
bin  conf  data  docs  lib  LICENSE.txt  log  NOTICE.txt  README.md  README_packaging.md
[root@localhost zookeeper-3.7.0-bin]# vim ./data/myid
[root@localhost zookeeper-3.7.0-bin]#

192.168.71.134 该主机输入1保存

其他主机重复zoo.cfg和myid配置操作, 只不过myid配置一次是2,3

192.168.71.128 该主机输入2保存

192.168.71.135 该主机输入3保存

启动集群

配置zk环境变量(方便敲命令,非必须)

vim ~/.bashrc

...
export ZK_HOME=/root/zookeeper-3.7.0-bin/bin
export PATH=$ZK_HOME:$PATH
: wq

# 使其生效
source .bashrc
[root@localhost ~]# echo $ZK_HOME
/root/zookeeper-3.7.0-bin/bin
[root@localhost ~]# echo $PATH
/root/zookeeper-3.7.0-bin/bin:/usr/local/jdk1.8.0_211/bin:/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/root/bin

启动

分别启动三台

[root@localhost ~]# zkServer.sh start /root/zookeeper-3.7.0-bin/conf/zoo.cfg
ZooKeeper JMX enabled by default
Using config: /root/zookeeper-3.7.0-bin/conf/zoo.cfg
Starting zookeeper ... STARTED
[root@localhost ~]# jps
3712 Jps
3677 QuorumPeerMain
[root@localhost ~]#

使用客户端连接

zkCli.sh -server localhost:2181

报错如下:
empting reconnect except it is a SessionExpiredException.
EndOfStreamException: Unable to read additional data from server sessionid 0x0, likely server has closed socket

报错意思是好像客户server已经关闭

可能是端口防火墙导致不能通讯

开通防火墙

[root@localhost ~]# firewall-cmd --list-ports

[root@localhost ~]# firewall-cmd --list-ports --permanent 

[root@localhost ~]# firewall-cmd --add-port=2181/tcp --add-port=2888/tcp --add-port=3888/tcp --permanent 
success
[root@localhost ~]# firewall-cmd --list-ports --permanent 
2181/tcp 2888/tcp 3888/tcp
[root@localhost ~]# firewall-cmd --reload 
success

开通防火墙还是不行

jsp发现192.168.71.128的java进程竟然没有启动起来

在这台机器上发现myid是22(无语,自己太粗心了)

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-HdcOyyAu-1640181602688)(img/zookeeper%E9%9B%86%E7%BE%A4%E6%A8%A1%E5%BC%8F%E9%83%A8%E7%BD%B2/image-20211222210207668.png)]

[root@localhost zookeeper-3.7.0-bin]# jps
3536 ZooKeeperMain
3409 QuorumPeerMain
3595 Jps

多了一个ZooKeeperMain进程,这个是我们客户端的连接进程

注意: 防火墙开通那一步还是必须的

练习客户端命令

[zk: localhost:2181(CONNECTED) 0] ls /
[zookeeper]
[zk: localhost:2181(CONNECTED) 9] create /zk
Created /zk
[zk: localhost:2181(CONNECTED) 10] create -es /zk/test 
Created /zk/test0000000000
[zk: localhost:2181(CONNECTED) 11] 
[zk: localhost:2181(CONNECTED) 11] get /zk/test0000000000
null
[zk: localhost:2181(CONNECTED) 12] 
[zk: localhost:2181(CONNECTED) 12] create /zk/test
Created /zk/test 覆盖了临时有序节点
[zk: localhost:2181(CONNECTED) 13] create -es /zk/test
Created /zk/test0000000002
[zk: localhost:2181(CONNECTED) 14] create -es /zk/test
Created /zk/test0000000003
[zk: localhost:2181(CONNECTED) 15] create -es /zk/test data1
Created /zk/test0000000004
[zk: localhost:2181(CONNECTED) 16] get /zk/test0000000004
data1
[zk: localhost:2181(CONNECTED) 17] 
[zk: localhost:2181(CONNECTED) 17] delete /zk/test0000000004
[zk: localhost:2181(CONNECTED) 18] deleteall /zk
[zk: localhost:2181(CONNECTED) 19] ls -s /
[zookeeper]
cZxid = 0x0
ctime = Wed Dec 31 16:00:00 PST 1969
mZxid = 0x0
mtime = Wed Dec 31 16:00:00 PST 1969
pZxid = 0x10000000a
cversion = 1
dataVersion = 0
aclVersion = 0
ephemeralOwner = 0x0
dataLength = 0
numChildren = 1
[zk: localhost:2181(CONNECTED) 20] 

# acl

acl命令

Zookeeper 的 ACL(Access Control List)，分为三个维度：scheme、id、permission
通常表示为：scheme:id:permission

  • schema:代表授权策略
  • id:代表用户
  • permission:代表权限

Scheme

world：默认方式，相当于全世界都能访问

auth：代表已经认证通过的用户(可以通过 addauth digest user:pwd 来添加授权用户)

digest：即用户名:密码这种方式认证，这也是业务系统中最常用的

ip：使用 ip 地址认证

id

id 是验证模式，不同的 scheme，id 的值也不一样。

scheme 为 auth 时：username:password

scheme 为 digest 时 : username:BASE64(SHA1(password))

scheme 为 ip 时: 客户端的 ip 地址。

scheme 为 world 时 anyone。

Permission

CREATE、READ、WRITE、DELETE、ADMIN 也就是 增、删、改、查、管理权限，这 5 种权限简写为 crwda(即：每个单词的首字符缩写)

CREATE©：创建子节点的权限

DELETE(d)：删除节点的权限

READ®：读取节点数据的权限

WRITE(w)：修改节点数据的权限

ADMIN(a)：设置子节点权限的权限

getAcl

[zk: localhost:2181(CONNECTED) 9] create /acl
Created /acl
[zk: localhost:2181(CONNECTED) 10] create -c /acl/test 'test acl'
Created /acl/test
[zk: localhost:2181(CONNECTED) 11] getAcl /acl/test
'world,'anyone
: cdrwa
[zk: localhost:2181(CONNECTED) 12]

setAcl

[zk: localhost:2181(CONNECTED) 12] setAcl /acl/test world:anyone:crwa
[zk: localhost:2181(CONNECTED) 13] getAcl /acl/test
'world,'anyone
: crwa
[zk: localhost:2181(CONNECTED) 14] delete /acl/test # 可以删除

addauth

[zk: localhost:2181(CONNECTED) 24] addauth digest user1:12345
[zk: localhost:2181(CONNECTED) 25] setAcl /acl/test auth:user1:12345:crwa
Insufficient permission : /acl/test # 权限不足

[zk: localhost:2181(CONNECTED) 28] create /acl/test2 # 重新创建一个节点,因为之前那个节点创建时候,这个用户还没有添加
Created /acl/test2
[zk: localhost:2181(CONNECTED) 29] setAcl /acl/test2 auth:user1:12345:crwa
[zk: localhost:2181(CONNECTED) 30] getAcl /acl/test2 
'digest,'user1:+owfoSBn/am19roBPzR1/MfCblE=
: crwa
[zk: localhost:2181(CONNECTED) 31] delete /acl/test2 # 可以删除,旧版好像不能删除

[zk: localhost:2181(CONNECTED) 34] create /acl/test2 data2
Created /acl/test2
[zk: localhost:2181(CONNECTED) 35] setAcl /acl/test2 auth:user1:12345:crw
[zk: localhost:2181(CONNECTED) 36] delete /acl/test2 # what? 依然可以删除

[zk: localhost:2181(CONNECTED) 39] setAcl /acl/test2 auth:user1:12345:r
[zk: localhost:2181(CONNECTED) 40] delete /acl/test2 # 还是可以删除

help,发现有个whoami, 可能新版需要切换用户吧,以后有时间再研究

Digest

auth 与 digest 的区别就是，前者使用明文密码进行登录，后者使用密文密码进行登录

create /testDir/testDigest	data addauth digest user1:123456
setAcl /testDir/testDigest digest:user1:HYGa7IZRm2PUBFiFFu8xY2pPP/s=:crwa	# 使用 digest
来设置权限
注意：这里如果使用明文，会导致该 znode 不可访问通过明文获得密文
shell>
java -Djava.ext.dirs=/soft/zookeeper-3.4.12/lib -cp /soft/zookeeper-3.4.12/zookeeper-3.4.12.jar org.apache.zookeeper.server.auth.DigestAuthenticationProvider deer:123456

deer:123456->deer:ACFm5rWnnKn9K9RN/Oc8qEYGYDs=
岁月玲珑
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
【zookeeper】zookeeper的ACL权限控制
九师兄
05-10 2422
1.概述 ACL：Access Control List 访问控制列表 关联文章：【zookeeper】ZooKeeper 权限管理与Curator增加权限验证 关联文章：【kafka】kerberos client is being asked for a password not available to garner authentication informa 1.1 简介 ACL 权限控制，使用：scheme:id:perm 来标识，主要涵盖 3 个方面： 　 权限模式（Scheme）：授权的
apache-zookeeper-3.7.0-bin.tar.gz
01-04
apache-zookeeper-3.7.0-bin.tar.gz
启动zookeeper源码的艰难历程- -
weixin_37755196的博客
11-27 869
记一篇本地启动ZooKeeper源码时报错解决办法 启动QuorumPeerMain报错经历... 一、第一次启动QuorumPeerMain时报错找不到version.Info文件。这里提两种方法 1、直接在version包下创建info.java文件 ackage org.apache.zookeeper.version; public interface Info { int MAJOR=3; int MINOR=5; int MICR...
【已解决】zookeeper启动失败Error contacting service. It is probably not running并且jps没有QuorumPeerMain进程
yyuan_in的博客
07-22 2531
启动zookpeerer，查看状态显示Errorcontactingservice.Itisprobablynotrunning.，查看jps也没有QuorumPeerMain进程。查看zookeeper.out文件来寻找问题原因（当前处于哪个目录，执行完zkServer.shstart命令，zookeeper.out就会写在哪个目录）重点看Causedby的第一行（如果你的原因和我不一样，就去找对应的原因即可，应该网上都有）于是我将下面两行的注释单独放在一行。......
ZooKeeper_9_Java操作ZK_检测节点
Simba_cheng的博客
09-03 1万+
检测节点是否存在 同步接口 Stat exists(final String path, Watcher watcher) Stat exists(String path, boolean watch) 异步接口 void exists(final String path, Watcher watcher, StatCallback cb, Object ctx) vo
【1. zookeeper常用命令】
努力学习
12-22 1万+
zookeeper常用命令 启动zookeeper命令 zkServer.sh start conf/zoo.cfg 连接zookeeper命令 zkCli.sh -server localhost:2181 ZooKeeperMain无法kill -9 掉 [root@localhost ~]# jps 5137 Jps 3891 ZooKeeperMain 使用top命令查看僵尸进程 [root@localhost ~]# top top - 06:44:35 up 2:34, 2 users
【ZooKeeper】zookeeper源码9-ZooKeeper读写流程源码分析
一梦
02-12 4990
源码项目zookeeper-3.6.3：核心工作流程
【分布式】Zookeeper的服务器角色
weixin_30788731的博客
12-06 187
一、前言 　　前一篇已经详细的讲解了Zookeeper的Leader选举过程，下面接着学习Zookeeper中服务器的各个角色及其细节。 二、服务器角色 　　2.1 Leader 　　Leader服务器是Zookeeper集群工作的核心，其主要工作如下 　　(1) 事务请求的唯一调度和处理者，保证集群事务处理的顺序性。 　　(2) 集群内部各服务器的调度者。 　　1. 请求处理链 ...
集群环境搭建-Centos+kafka+zookeeper+hadoop+Spark
12-19
通过VirtualBox安装多台虚拟机，实现集群环境搭建。 优势：一台电脑即可。 应用场景：测试，学习。...内附百度网盘下载地址，有hadoop+zookeeper+spark+kafka等等·····需要的安装包和配置文件
zookeeper+hadoop+hbase+hive(集成hbase)安装部署教程（超详细）.docx
06-01
jdk1.8.0_131、apache-zookeeper-3.8.0、hadoop-3.3.2、hbase-2.4.12 mysql5.7.38、mysql jdbc驱动mysql-connector-java-8.0.8-dmr-bin.jar、 apache-hive-3.1.3 2.本文软件均安装在自建的目录/export/server/下 ...
Springboot+dubbo+zookeeper+swagger+mybatisplus+mysql
06-30
Springboot+dubbo+zookeeper+swagger+mybatisplus+mysql Springboot之zookeeper注册中心
centos8安装zookeeper3.8.0详细步骤
05-05
centos8安装zookeeper3.8.0详细步骤
centos8安装zookeeper-3.5.7.docx
11-02
zookeeper
0719 zookeeper背景及介绍
yjyyyyyy的博客
07-19 1万+
zookeeper背景 ZooKeeper—译名为“动物园管理员”。动物园里当然有好多的动物，游客可以根据动物园提供的向导图到不同的场馆观赏各种类型的动物，而不是像走在原始丛林里，心惊胆颤的被动 物所观赏。为了让各种不同的动物呆在它们应该呆的地方，而不是相互串门，或是相互厮杀，就需要动物园管理员按照动物的各种习性加以分类和管理，这样我们才能更加放心安全的观赏动物。 回到企业级应用系统中，随着信息化...
工具的使用（k9s-zk-git）
热门推荐
NeverSayNever
07-02 2万+
1.
Zookeeper学习笔记
qq_48617775的博客
07-19 1823
Zookeeper学习笔记
Zookeeper教程-9 IO通讯模型
博客
12-17 1万+
IO通信模型 网络通信的本质是网络间的数据IO。只要有IO，就会有阻塞或非阻塞的问题，无论这个IO是网络的，还是硬盘的。原因在于程序是运行在系统之上的，任何形式的IO操作发起都需要系统的支持 BIO（阻塞模式） BIO即blocking IO，是一种阻塞式的IO jdk1.4版本之前的Socket即BIO模式 BIO的问题在于accept()、read()的操作点都是被阻塞的 服务器线程发起一个accept动作，询问操作系统是否有新的socket信息从端口X发送过来。注意，是询问操作系统。如果操作系统没有发
zookeeper系列9：zookeeper应用场景
wy425826501的博客
06-09 1万+
后续补充
Linux知识点笔记
最新发布
exercise_smile的博客
05-16 878
Linux 主要的发行版(release):Ubuntu(乌班图)、 RedHat(红帽)、 CentOS、 Debain[蝶变]、 Fedora、 SuSE、 OpenSUSE [示意图]在 linux 中的每个用户必须属于一个组， 不能独立于组外。在 linux 中每个文件 有所有者、 所在组、 其它组的概念。ls -l 中显示的内容如下：0-9 位说明：第 0 位确定文件类型(d, - , l , c , b)l 是链接， 相当于 windows 的快捷方式。
hadoop+zookeeper+hbase+hive(hql)安装步骤
10-24
2. 安装Zookeeper： - 下载并解压Zookeeper的安装包。 - 创建Zookeeper的数据目录和日志目录。 - 复制Zookeeper的模板配置文件zoo_sample.cfg为zoo.cfg，并配置相关参数。 - 启动Zookeeper服务器：zkServer.sh ...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

岁月玲珑

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值