Linux 从零开始部署zookeeper集群遇到的问题

最新推荐文章于 2023-08-21 17:29:58 发布
最新推荐文章于 2023-08-21 17:29:58 发布
阅读量491 收藏 2
点赞数 1
分类专栏： 部署实战 zookeeper 文章标签： linux zookeeper java
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_45754452/article/details/123076808
版权

文章目录

安装JDK环境

ZooKeeper是用Java编写的，运行在Java环境上，因此，在部署zk的机器上需要安装Java运行环境

下面是JDK8的压缩包
链接：https://pan.baidu.com/s/1oeEFRXHNCB8uHOB1mc86EQ
提取码：64u0

下载好后，使用Xshell进行传递文件给虚拟机，主机就是ifconfig里面的ens33里面的IP地址，选择SFTP安全文件传输协议，端口号22，连接后会问你虚拟机的用户和密码，就是你虚拟机登录的用户名和密码，连接好后将上面下好的压缩包拖到黑色的命令行，就会自动帮你把文件传进去了
请添加图片描述下面就是传输成功了，不使用拖文件的方式也可以直接输入命令
Uploading jdk-8u141-linux-x64.tar.gz to remote:/root/jdk-8u141-linux-x64.tar.gz
可以看到remote就是指的远程主机，后面的路径就是上传的路径

请添加图片描述

tar -zxf jdk-8u141-linux-x64.tar.gz
mv jdk1.8.0_141/ /usr/local/

解压压缩包，并移到/usr/local/用户的程序目录，配置环境

vim /etc/profile

修改配置为如下，关于export PATH那里的配置如果本来就有只需在后面加上:${JAVA_PATH}即可，注意前面有个冒号

export JAVA_HOME=/usr/local/jdk1.8.0_141
export JRE_HOME=${JAVA_HOME}/jre
export CLASSPATH=.:${JAVA_HOME}/lib:${JRE_HOME}/lib:$CLASSPATH
export JAVA_PATH=${JAVA_HOME}/bin:${JRE_HOME}/bin
export PATH=${PATH}:${JAVA_PATH}

让配置文件生效，javac是测试jdk配置成功没有，没有成功记得检测版本号要和自己的jdk一致，因为版本号就是文件夹的名字

source /etc/profile
javac

出现如下则配置java环境成功
在这里插入图片描述

安装Zookeeper

下载Zookeeper

注意版本很重要，博主原先使用zookeeper-3.7.0版本，无法搭建成功

wget https://archive.apache.org/dist/zookeeper/zookeeper-3.3.3/zookeeper-3.3.3.tar.gz --no-check-certificate

解压

tar -zxvf zookeeper-3.3.3.tar.gz
mv zookeeper-3.3.3 /opt/zookeeper
cd /opt/zookeeper

修改配置

需要将conf目录下的zoo_sample.cfg名称修改为zoo.cfg

mv /opt/zookeeper/conf/zoo_sample.cfg /opt/zookeeper/conf/zoo.cfg 
vi /opt/zookeeper/conf/zoo.cfg

可以看到clientPort=2181，即zookeeper服务启动的端口为2181

启动服务器

以下命令可以看到命令台日志打印，不是后台运行

/opt/zookeeper/bin/zkServer.sh start

出现如下情况即是启动成功
在这里插入图片描述

使用zookeeper客户端连接服务器

/opt/zookeeper/bin/zkCli.sh -server 127.0.0.1:2181

出现如下，则是连接够从
在这里插入图片描述

搭建集群

在集群模式下至少部署三个zookeeper服务器，所以我们先复制zookeeper两次

cp -r /opt/zookeeper /opt/zookeeper1
cp -r /opt/zookeeper /opt/zookeeper2

修改配置

修改三个zookeeper文件夹下的配置，其他配置不变

/opt/zookeeper/conf/zoo.cfg

vi /opt/zookeeper/conf/zoo.cfg

tickTime=2000
dataDir=/tmp/zookeeper
clientPort=2181
server.1=127.0.0.1:2886:3886
server.2=127.0.0.1:2888:3888
server.3=127.0.0.1:2889:3889

/opt/zookeeper1/conf/zoo.cfg

vi /opt/zookeeper1/conf/zoo.cfg

tickTime=2000
dataDir=/tmp/zookeeper1
clientPort=2281
server.1=127.0.0.1:2886:3886
server.2=127.0.0.1:2888:3888
server.3=127.0.0.1:2889:3889

/opt/zookeeper2/conf/zoo.cfg

vi /opt/zookeeper2/conf/zoo.cfg

tickTime=2000
dataDir=/tmp/zookeeper2
clientPort=2381
server.1=127.0.0.1:2886:3886
server.2=127.0.0.1:2888:3888
server.3=127.0.0.1:2889:3889

修改完配置还需要创建myid文件，对应server.1、server.2、server.3配置，myid文件必须dataDir配置的目录下

mkdir  /tmp/zookeeper
mkdir  /tmp/zookeeper1
mkdir  /tmp/zookeeper2

touch /tmp/zookeeper/myid
touch /tmp/zookeeper1/myid
touch /tmp/zookeeper2/myid

然后将myid文件内容分别改为1、2、3

vi /tmp/zookeeper/myid
vi /tmp/zookeeper1/myid
vi /tmp/zookeeper2/myid

使用netstat检查要开启的九个端口有没有被占用

netstat -anp | grep 2181
netstat -anp | grep 2281
netstat -anp | grep 2381
netstat -anp | grep 2886
netstat -anp | grep 3886
netstat -anp | grep 2888
netstat -anp | grep 3888
netstat -anp | grep 2889
netstat -anp | grep 3889

启动三个Zookeeper进程

启动之前必须切换到root才有权限，或者赋权

chmod a+wxr /opt/zookeeper/
chmod a+wxr /opt/zookeeper1/
chmod a+wxr /opt/zookeeper2/

启动服务器

/opt/zookeeper/bin/zkServer.sh start 
/opt/zookeeper1/bin/zkServer.sh start 
/opt/zookeeper2/bin/zkServer.sh start

开启第三个服务器出现了如下问题，可以看到是/tmp/zookeeper2/myid文件里不是3，而是333，修改后就好了
在这里插入图片描述

使用如下命令将Zookeepr客户端连接集群

/opt/zookeeper/bin/zkCli.sh -server 127.0.0.1:2181,127.0.0.1:2281,127.0.0.1:2381

出现如下界面则搭建成功
在这里插入图片描述

Zookeepr客户端的使用

刚刚使用客户端成功连接了集群，现在我们来使用一下客户端

创建znode

/znode1 是路径，可以通过路径可以访问到数据 “znode-persistent” ，注意，创建时路径和数据之间只能隔着一个空格，否则传入的数据就是空，使用get时是取不到的，后面的所有命令之间都只能有一个空格

create /znode1 "znode-persistent" 	#创建持久节点
create /znode2 "znode-temp" -e   		#创建临时节点，重启后数据消失
create /znode3 "znode-sequence" -s   	#创建顺序节点，会自动向路径填充10位序列号，序号是递增的

创建临时节点和顺序节点需要ACL权限，否则运行后zookeeper客户端会直接退出，可以使用
scheme:id :perm 来标识一个有效的ACL信息，分别对应权限模式(Scheme)、授权对象(ID)和权限(Permission)

create -e /znode2 "znode-temp" digest:user1:XDkd2dsEuhc9ImU3q8pa8UOdtpI=:cwrdaCreated /znode2
create -s /znode3 "znode-sequence" digest:user1:XDkd2dsEuhc9ImU3q8pa8UOdtpI=:cwrdaCreated /znode3

使用ls2 就可以看见我们创建的节点是否成功了

ls2 /

可以看到下面出现了我们刚刚创建的znode1、znode2、znode30000000018，这个znode30000000018每个人都可能不一样，因为是一个系统生成的递增的序列号
在这里插入图片描述

获取数据

获取刚刚存入的znode节点中数据，

get /znode1
get /znode2
get /znode30000000018 #每个人可能不一样

出现了如下问题，原因是get 和 /znode1之间多了一个空格
在这里插入图片描述

检查状态

stat /znode1
stat /znode2
stat /znode30000000018

出现如下信息
在这里插入图片描述

cZxid = 0x200000014   #zone节点的Id
ctime = Wed Feb 23 01:49:22 PST 2022 #节点创建时间
mZxid = 0x200000014 #zone节点修改后的id
mtime = Wed Feb 23 01:49:22 PST 2022 #节点修改时间
pZxid = 0x200000014 #子zone节点的id
cversion = 0 #节点所拥有的子节点被修改的版本号
dataVersion = 0 #当前节点数据的版本号
aclVersion = 0 #节点的ACL被修改的版本号
ephemeralOwner = 0x0  #如果节点为临时节点，那么它的值为这个节点拥有者的session ID，否则为0x0
dataLength = 18 #数据长度
numChildren = 0 #子节点个数

设置数据

set /znode1 "znode-persistent-set" 
set /znode2 "znode-temp-set" 
set /znode30000000018 "znode-sequence-set"

查看是否修改成功

get /znode1
get /znode2
get /znode30000000018 #每个人可能不一样

监视znode的变化

get /znode1 -w
set /znode1 "znode-persistent-set"

出现如下情况则说明监视成功，每次添加监听器，只会监听一次事件，之后会失效
在这里插入图片描述

创建znode的子节点

只需要在父路径下再加路径就可以创建子节点

create /znode1/znode-children1 "znode-children1"
create /znode1/znode-children2 "znode-children2"
create /znode1/znode-children3 "znode-children3"

列出znode的子节点

ls /znode1

删除znode

delete /znode1/znode-children1
ls /znode1

出现如下情况则删除成功
在这里插入图片描述

查看Zookeepr命令

ls

出现如下信息
在这里插入图片描述

stat path [watch] #查看路径节点状态，-w添加监视器
set path data [version] #修改已经存在的节点的数据
ls path [watch] #列出该路径下的子结点，path为/时列出所有节点
delquota [-n|-b] path #删除quota节点，删除/zookeeper/quota下的子结点
ls2 path [watch] #列出该路径下的子结点，path为/时列出所有节点，同时会显示一些状态信息
setAcl path acl #设置acl权限
setquota -n|-b val path #设置quota节点 所以path都保存在/zookeeper/quota下作为其子结点
history #查看最近使用的命令历史记录
redo cmdno #重复执行之前执行过的命令 cmdno是命令行显示的那个数字，表示第几条命令。最开始为0
printwatches on|off # on表示输出watch事件，off表示关闭输出watch事件
delete path [version] # 删除节点
sync path #强制客户端所连接的服务器与leader进行数据同步，这样在读取path的值就是最新的值
listquota path #列出quota节点，列出/zookeeper/quota下的子结点
get path [watch] #获取路径节点的数据，-w添加监视器
create [-s] [-e] path data acl #创建znode节点 -s有序 -e临时 path路径 data事件 acl权限
addauth scheme auth #添加认证用户 
quit  #退出连接
getAcl path #读取ACL权限
close  #关闭连接
connect host:port #打开连接
lolxxs
关注
  • 1
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
Docker分布式部署zookeeper集群
01-07
准备 3台机器安装docker HOST1: centos7.5 :172.16.217.135 zk1 HOST2: centos7.5 :172.16.217.136 zk2 HOST3: centos7.5 :172.16.217.137 zk3 先把防火墙开放三个端口 sudo firewall-cmd --zone=public --add-port...
zookeeper启动报错出现Starting zookeeper ... FAILED TO START详细解决方案
热门推荐
YYbLQQ的博客
12-08 2万+
zookeeper启动时出现/usr/local/apache-zookeeper-3.5.9-bin/bin/../没有权限等问题
zookeeper安装与启动
weixin_38977651的博客
07-01 2453
zk被设计用于存储协调数据：状态信息、配置、位置信息等，因此每个节点存储的数据一般很小，在B~KB的范围内。•心跳：主机 A, B 通过 tcp 连接发送数据，如果拔掉 A 主机的网线，B 是无法感知到的。•znode维护一个统计结构，其中包括数据更改、ACL更改和时间戳的版本号，每次znode数据更改时，版本号都会增加。•临时节点：只要创建znode的会话处于活动状态，这些znode就存在，当会话结束时，znode被删除。存储内存数据库快照的位置，除非另有说明，否则存储数据库更新的事务日志。
安装zookeeper启动时报错zkServer.sh: command not found
最新发布
qq_53663722的博客
08-21 2136
我是四台服务器，第一台zookeeper配置好，环境变量配置好然后使用scp命令分发到其它三台的，然后启动时发现第一台zkServer.sh: command not found，而其它三台正常启动。使用第一个命令发现没有，然后四台都使用第二个命令发现就第一台没有zookeeper的环境变量，但是我查看环境变量里面是存在的，不知为什么，反正是回车换了一行然后保存退出的。3. 路径错误：如果通过上述命令找到了`zkServer.sh`，请确保在运行命令时使用了正确的路径。
Zookeeper启动及基本使用
Legrnd的博客
06-27 3202
连接服务器: zkCli.sh -server 127.0.0.1:2181。查看ZK服务状态: bin/zkServer.sh status。重启ZK服务: bin/zkServer.sh restart。启动ZK服务: bin/zkServer.sh start。停止ZK服务: bin/zkServer.sh stop。
【解决】zookeeper启动时一直报 ： Starting zookeeper ... FAILED TO START
王一横的个人博客
06-21 1万+
环境 CentOS 8.3 64位 zookeeper-3.7.0 问题描述 在搭建zookeeper集群的的时候一直报如下错误： [root@iZwz zookeeper]# ./bin/zkServer.sh start /opt/mydata/zkdata1/zoo.cfg ZooKeeper JMX enabled by default Using config: /opt/mydata/zkdata1/zoo.cfg Starting zookeeper ... FAILED TO START
Linux下Zookeeper集群的安装
08-30
Linux下Zookeeper集群的安装
zookeeper-3.4.13集群一键部署工具
07-16
一键部署工具实现功能如下： 1、支持单节点部署 2、支持伪集群部署 3、支持分布式集群部署 4、支持数据目录、端口参数灵活...说明：工具使用非常简单，只需要修改变量文件，一分钟就可以快速帮你部署zookeeper集群。
Zookeeper集群部署3.5.5.docx
09-14
"Zookeeper集群部署3.5.5" Zookeeper是一个开源的分布式协调服务，能够提供高可用性和可靠性的集群管理。以下是Zookeeper集群部署3.5.5的详细知识点： 一、前提条件 * 关闭防火墙，以确保集群的安全和可靠性。 ...
zookeeper linux集群搭建流程
08-16
zookeeper Linux 集群搭建流程 ZooKeeper 是一个广泛使用的分布式协调服务，主要用于管理和协调分布式系统中的各个节点。Linux 集群搭建是 ZooKeeper 的一种常见应用场景，本文将详细介绍 ZooKeeper Linux 集群搭建...
Linux安装Zookeeper详细步骤（下载，安装，配置，启动，停止）
唯有努力，方可自信！
08-04 1万+
顾名思义 zookeeper 就是动物园管理员，他是用来管 hadoop（大象）、Hive(蜜蜂)、pig(小 猪)的管理员， Apache Hbase 和 Apache Solr 的分布式集群都用到了 zookeeper；Zookeeper: 是一个分布式的、开源的程序协调服务，是 hadoop 项目下的一个子项目。他提供的主要功 能包括：配置管理、名字服务、分布式锁、集群管理。......
zkCli.sh命令使用
西北角稳
01-03 1万+
zkCli.sh命令 想要用zkClient链接zookeeper，首先执行如下命令，连接到zookeeper server ./zkCli.sh -server localhost:2181 help命令 help命令用于查询客服端所支持的所用的命令，执行help，输入如下： ZooKeeper -server host:port cmd args stat path [watch] ...
ZooKeeper 之zkCli.sh 客户端一文读懂
zhouzhiwengang的专栏
08-05 2191
set path data [version] :修改当前节点的数据内容 如果指定版本，需要和当前节点的数据版本一致。setquota -n|-b val path 设置节点配额（比如限制节点数据长度，限制节点中子节点个数）delete path [version] 删除指定路径的节点 如果有子节点要先删除子节点。pZxid 操作当前节点的子节点列表的事物ID(这种操作包含增加子节点，删除子节点)ephemeralowner 当前节点的如果是临时节点，该属性是临时节点的事物ID。...
zookeeper的集群搭建以及遇到的问题总结
qq_27661881的博客
07-09 4575
1、在/目录下创建zookeeper文件夹 mkdir zookeeper 2、wgethttps://mirrors.bfsu.edu.cn/apache/zookeeper/zookeeper-3.6.3/apache-zookeeper-3.6.3-bin.tar.gz 3、tar -zxvfapache-zookeeper-3.6.3-bin.tar.gz 4、在/zookeeper目录下创建dataDir目录，用于存放数据文件，然后在这个文件夹下创建myid文件，写入任意数字 5、进..
Zookeeper集群搭建常见问题
m0_59501411的博客
05-02 2691
通过命令：ZkServer.sh status查看zookeeper状态显示以下错误 1. Mode: standalone zookeeper处于单机模式，说明此时zookeeper的zoo.cfg文件配置有问题 2. Error contacting service. It is probably not running. (1)由于我们总共使用三个zookeeper服务器，所以会涉及到zookeeper之间的选举问题 因此我们需要同时在三个zookeeper中运行 zkSer...
linux中zookeeper环境搭建 和 碰到的问题总结
chengeng_GC的博客
06-09 763
linux中zookeeper环境搭建 和 碰到的问题总结
我在集群中Zookeeper遇到的一些问题及解决方法
qq_52676760的博客
11-05 889
Zookeeper是一个高可用的分布式数据管理和协调框架，可以保证分布式环境中数据的一致性。Zookeeper有两种安装方式，单机和集群模式，我所安装的是集群模式，安装在Hadoop集群（3个）上。安装时有以下几点需要注意： 1.配置环境变量时，应注意ZK_HOME和PATH的先后顺序。 可通过命令source 、/etc/profile 使环境变量生效。 2.通过命令zkServer.sh start启动Zookeeper后，应使用命令jps查看当前java进程，确保有QuorumPee...
zookeeper集群搭建时出现的bug错误
Eriksen的博客
05-31 215
1.zookeeper集群搭建，启动成功，但是查看状态时报错：http://t.csdn.cn/CFG7q。2.在zoo.cfg里加一个，这个是允许外网访问。3.给zookeeper安装目录rwx权限。
Zookeeper集群的搭建及遇到的问题
满腹的小不甘
05-21 1845
一、Zookeeper集群的搭建1.准备三台主机mini1、mini2、mini3，安装Zookeeper：（1）导入Zookeeper-3.4.5.tar.gz安装包            直接拖安装包安装法： 前提，安装了lrzsz：也可以直接选：  （2）解包Zookeeper-3.4.5下不用的文件删除掉，否则运行时会很慢：最后剩下的文件为： 2. 配置文件为了不破坏zoo_samplle...
docker部署zookeeper集群
03-16
Docker是一种容器化技术，可以方便地部署和管理应用程序。要部署Zookeeper集群，可以使用Docker容器来实现。...需要注意的是，Zookeeper集群的部署需要考虑到容器之间的通信和数据同步等问题，需要仔细配置和测试。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

lolxxs

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值