Linux 安装zookeeper

已于 2023-02-15 17:16:00 修改
阅读量2.5k 收藏 3
点赞数
文章标签： zookeeper
于 2021-11-07 18:28:22 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_43620910/article/details/121194412
版权

背景：三台阿里云服务器，centos 7

1. 下载
链接：

 http://zookeeper.apache.org/releases.html
 https://archive.apache.org/dist/zookeeper/

在这里插入图片描述

2. 上传
通过 MobaXterm stfp功能
上传文件到 /opt/pkg
1） 下载后上传 在这里插入图片描述
2）直接在线下载也可以


wget https://archive.apache.org/dist/zookeeper/zookeeper-3.4.6/zookeeper-3.4.6.tar.gz

在这里插入图片描述
在这里插入图片描述

3. 解压
三台机器都需要安装，配置

 tar -zxvf zookeeper-3.4.6.tar.gz -C /opt/software/       --解压到指定路径

在这里插入图片描述
4. 配置文件

  cd /opt/software/zookeeper-3.4.6/conf
  cp zoo_sample.cfg zoo.cfg

在这里插入图片描述

vi zoo.cfg

在这里插入图片描述

注释掉自带的
clientPort=2181
dataDir=/tmp/zookeeper（tmp路径下的文件会被定期删除，dataDir不可配置在此路径下，否则报错）

clientPort=2181
dataDir=/opt/software/zookeeper/data
dataLogDir=/opt/software/zookeeper/logs

server.1=0.0.0.0:2881:3881          --阿里云 本机都配置0.0.0.0 其他两台机器，配公网ip
server.2=cdh02:2881:3881            --配了host映射，所以这里主机名代替ip
server.3=cdh03:2881:3881

第二台机器

 
clientPort=2181
dataDir=/opt/software/zookeeper/data
dataLogDir=/opt/software/zookeeper/logs

server.1=cdh01:2881:3881
server.2=0.0.0.0:2881:3881
server.3=cdh03:2881:3881

第三台机器

clientPort=2181
dataDir=/opt/software/zookeeper/data
dataLogDir=/opt/software/zookeeper/logs

server.1=cdh01:2881:3881
server.2=cdh02:2881:3881
server.3=0.0.0.0:2881:3881

5.创建数据存放目录，并创建myid文件

mkdir -p /opt/software/zookeeper/data
mkdir -p /opt/software/zookeeper/logs

在这里插入图片描述

 cd /opt/software/zookeeper/data/
 echo 1 > myid

 echo 2 > myid --其他两台分别是2 和 3
 echo 3 > myid --其他两台分别是2 和 3

在这里插入图片描述
6. 配置环境变量

vim /etc/profile.d/my_env.sh 

export ZOOKEEPER_HOME=/opt/software/zookeeper-3.4.6
export PATH=$PATH:$ZOOKEEPER_HOME/bin

在这里插入图片描述

source /etc/profile.d/my_env.sh          --刷新

7.启动

三台依次启动

cd /opt/software/zookeeper-3.4.6/
 bin/zkServer.sh start

查看状态

bin/zkServer.sh status

8.报错

1)端口占用

报错信息
ERROR [/0.0.0.0:3881:QuorumCnxManager$Listener@517] - Exception while listening java.net.BindException: Address already in use (Bind failed)
在这里插入图片描述
查看端口，果然被占用（同理，查看2181也被占用了）

netstat -tunlp | grep 3881

在这里插入图片描述
修改zoo.cfg
1）2181修改为2189 （经查看，2181也被占用了）
2）2881 修改为 2888,3881修改为3888（三台都需要修改）
在这里插入图片描述
重新启用成功
在这里插入图片描述
2）ip地址不是本机网卡

云服务器采用虚拟化的技术，而监听的网卡是属于物理网关的网卡。虚拟化机内部无此网卡，所以监听不到

解决方案：监听所有网卡，以下两个方式都可行，二选一即可

quorumListenOnAllIPs=true        --开启此参数（ip正常配为公网ip，并开启此参数）
server.1=0.0.0.0:2888:3888       --或将本机ip改为0.0.0.0（完整内容见上面配置zoo.cfg）

在这里插入图片描述

注：阿里云，记得在安全组开放端口
在这里插入图片描述

3）报错：zookeeper Unexpected exception, tries=3, connecting to cdh03…

ERROR [QuorumPeer[myid=1]/0:0:0:0:0:0:0:0:2181:Learner@230] - Unexpected exception
java.net.SocketTimeoutException: connect timed out

[root@cdh01 bin]# ./zkServer.sh status
JMX enabled by default
Using config: /opt/software/zookeeper-3.4.6/bin/../conf/zoo.cfg
Error contacting service. It is probably not running.
[root@cdh01 bin]# ./zkServer.sh start
JMX enabled by default
Using config: /opt/software/zookeeper-3.4.6/bin/../conf/zoo.cfg
Starting zookeeper ... already running as process 15869.

 
cd /opt/software/zookeeper-3.4.6 
#查看日志
[root@cdh01 zookeeper-3.4.6]# cat zookeeper.out

#jps查看 在运行，杀掉进程
[root@cdh01 bin]# jps
1056 ResourceManager
32224 DataNode
2225 AlertPublisher
1041 JobHistoryServer
32227 NameNode
1989 HeadlampServer
32229 SecondaryNameNode
1990 EventCatcherService
17165 Jps
32223 QuorumPeerMain
[root@cdh01 bin] kill 32223

4）报错
报错信息： It is probably not running.

[root@cdh02 bin]# ./zkServer.sh status
JMX enabled by default
Using config: /opt/software/zookeeper-3.4.6/bin/../conf/zoo.cfg
Error contacting service. It is probably not running.

查看日志

[root@cdh02 bin]# cat zookeeper.out

日志内容：内存不够

Java HotSpot(TM) 64-Bit Server VM warning: INFO: os::commit_memory(0x000000008ee00000, 1237319680, 0) failed; error='Cannot allocate memory' (errno=12)
#
# There is insufficient memory for the Java Runtime Environment to continue.
# Native memory allocation (mmap) failed to map 1237319680 bytes for committing reserved memory.
# An error report file with more information is saved as:
# /opt/software/zookeeper-3.4.6/bin/hs_err_pid24458.log

处理办法，见此博客：https://blog.csdn.net/u014039577/article/details/49148063/

查看大小超过100M的文件，删log需慎重
[root@cdh02 bin]# find / -size +100M -exec ls -lh {} \;


清缓存
[root@cdh01 ~]# free -m
              total        used        free      shared  buff/cache   available
Mem:           7552        1545         872           0        5134        5707
Swap:             0           0           0
[root@cdh01 ~]# echo 1 > /proc/sys/vm/drop_caches
[root@cdh01 ~]# free -m
              total        used        free      shared  buff/cache   available
Mem:           7552        1545        5390           0         616        5748
Swap:             0           0           0
[root@cdh01 ~]# echo 2 > /proc/sys/vm/drop_caches
[root@cdh01 ~]# free -m
              total        used        free      shared  buff/cache   available
Mem:           7552        1543        5889           0         118        5815
Swap:             0           0           0
[root@cdh01 ~]# echo 3 > /proc/sys/vm/drop_caches
[root@cdh01 ~]# free -m
              total        used        free      shared  buff/cache   available
Mem:           7552        1545        5889           0         117        5814
Swap:             0           0           0

报错

[root@cdh02 bin]# cat zookeeper.out

Connection broken for id 1, my id = 2, error =
java.net.SocketException: Connection reset

大概是和zookeeper的启动有关（注意：确实需要一起启动，至于为什么要一起启动，现在还不清楚）
所以stop其他两台的zookeeper，三台一起重新启动

[root@cdh02 bin]# jps
19843 QuorumPeerMain
2678 DatartServerApplication
32250 Jps
[root@cdh02 bin]# kill 19843
[root@cdh02 bin]# jps
32275 Jps
2678 DatartServerApplication

三台一起stop，一起start 
[root@cdh01 bin]# ./zkServer.sh status
JMX enabled by default
Using config: /opt/software/zookeeper-3.4.6/bin/../conf/zoo.cfg
Mode: follower

[root@cdh01 bin]# ./zkServer.sh stop
[root@cdh02 bin]# ./zkServer.sh stop
[root@cdh03 bin]# ./zkServer.sh stop
JMX enabled by default
Using config: /opt/software/zookeeper-3.4.6/bin/../conf/zoo.cfg
Stopping zookeeper ... STOPPED

[root@cdh01 bin]# ./zkServer.sh status
JMX enabled by default
Using config: /opt/software/zookeeper-3.4.6/bin/../conf/zoo.cfg
Error contacting service. It is probably not running.

[root@cdh01 bin]# ./zkServer.sh start
[root@cdh02 bin]# ./zkServer.sh start
[root@cdh03 bin]# ./zkServer.sh start

JMX enabled by default
Using config: /opt/software/zookeeper-3.4.6/bin/../conf/zoo.cfg
Starting zookeeper ... STARTED


启动成功
[root@cdh01 bin]# ./zkServer.sh status
JMX enabled by default
Using config: /opt/software/zookeeper-3.4.6/bin/../conf/zoo.cfg
Mode: leader

[root@cdh02 bin]# ./zkServer.sh status
JMX enabled by default
Using config: /opt/software/zookeeper-3.4.6/bin/../conf/zoo.cfg
Mode: follower

[root@cdh03 bin]# ./zkServer.sh status
JMX enabled by default
Using config: /opt/software/zookeeper-3.4.6/bin/../conf/zoo.cfg
Mode: follower
star_iu
关注
  • 0
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Linux安装zookeeper集群.docx
01-28
Linux安装zookeeper集群部署文档
zookeeper-端口说明
热门推荐
龙哥(webnum)说的，每天进步一点点，总有一天会实现梦想！
08-04 4万+
一、zookeeper有三个端口（可以修改） 1、2181 2、3888 3、2888 二、三个端口的作用 1、2181：对cline端提供服务 2、3888：选举leader使用 3、2888：集群内机器通讯使用（Leader监听此端口） 三、部署时注意 1、单机单实例，只要端口不被占用即可 2、单机伪集群（单机，部署多个实例），三个端口必须修改为组组不一样 如：1
zookeeper修改端口
weixin_45544053的博客
09-29 2573
用zkServer.sh status后看到的错误 Error contacting service. It is probably not running 1 查看到错误是8080端口被占用 ./zkServer.sh start-foreground 1 修改server...
修改 Zookeeper 的客户端连接端口（默认2181端口）
最新发布
wzz2333的博客
02-15 929
修改 zookeeper 的客户端连接端口
ZooKeeper学习
苜蓿花乐园
03-02 2338
每个客户端都在指定的节点下注册一个临时的有序节点，越早创建的节点编号越小，依据最小的节点获取锁。利用Zookeeper节点的特性实现分布式锁，即同级节点的唯一性，多个进程往Zookeeper的指定节点下相同名称的节点只能有一个成功，失败的节点通过Watcher机制监听，一旦监听到节点的删除事件则再次触发所有进场去写锁。参与选举的节点会创建一个顺序节点，其中最小的一个做为master节点，没抢到的节点都监听前一个节点的删除事件，当master节点手动删除，或者挂了，后续节点抢占master。
Hadoop（3）—— Zookeeper（2）—— 修改Zookeeper配置文件
weixin_54348877的博客
10-19 3897
一、修改zookeeper的配置文件 1复制配置文件 zoo_sample.cfg 并重命名 在/export/servers目录下 输入：cd zookeeper-3.4.10/ 输入：cd conf/ 拷贝文件为zoo.cfg 输入：cp zoo_sample.cfg zoo.cfg 2. 修改zoo_cfg文件 输入：vi zoo.cfg 找到dataDir=/tmp/zookeeper 2.1 把 dataDir=/tmp/zookeeper改成data...
Linux下Zookeeper集群的安装
08-30
Linux下Zookeeper集群的安装
linux系统安装zookeeper 服务的方法
09-15
主要介绍了linux 系统安装zookeeper 服务的方法，非常不错，具有一定的参考借鉴价值,需要的朋友可以参考下
zookeeper linux集群搭建流程
08-16
zookeeper linux 搭建流程，zookeeper linux 搭建流程zookeeper linux 搭建流程zookeeper linux 搭建流程。
zookeeper linux版本
10-12
zookeeper linux版本 windows版 通用 ，下载后解压直接运行bin中的zkServer
zookeeper
彭于晏
09-11 1589
zookeeper 概述： ​ ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，是Google的Chubby一个开源的实现，是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件，提供的功能包括：配置维护、域名服务、分布式同步、组服务等。 ZooKeeper的目标就是封装好复杂易出错的关键服务，将简单易用的接口和性能高效、功能稳定的系统提供给用户。 ZooKeeper包含一个简单的原语集，提供Java和C的接口。 ZooKeeper代码版本中，提供了分布式独享锁
zookeeper关闭默认管理端口admin.serverPort=8080
小慌慌的博客
09-13 1万+
使用netstat -tunlp命令发现，除了zookeeper占用的2181端口以外还有一个随机端口和8080端口启用了。
Zookeeper面试系列-03
baidu_36611723的博客
11-14 214
zookeeper中对znode节点的操作权限主要有以下五种，我们可以通过其简写的任意组合来实现对znode节点的不同权限控制。名称简写权限说明CREATEc允许创建当前节点下的字节点DELETEd允许删除当前节点下的子节点，仅限下一级READr允许读取节点数据以及显示子节点的列表WRITEw允许设置当前节点的数据ADMINa管理员权限，允许设置或读取当前节点的权限列表#
微服务之zookeeper/consul
qq_41597232的博客
04-21 2179
zookeeper/consul1、zookeeper常见命令2、zookeeper准备工作3、服务提供者3.1、新建Cloud-provider-payment80053.2、改pom.xml文件3.3、写application.yml文件3.4、主启动类3.5、编写Controller3.6、启动8005注册进zookeeper3.7、验证测试3.8、思考4、消费者调用支付微服务4.1、新建cloud-consumerzk-order4.2、改pom.xml4.3、写application.yml4.4
zookeeper默认会占用8080端口，修改端口
小渣渣
10-14 4337
zookeeper启动后默认会占用8080端口，这样我们就没有办法正常使用8080端口 有三种方案可以解决这个问题，我这只是修改成其他的端口 修改端口 #vim zookeeper/conf/zoo.cfg 修改zk配置文件，添加下面的配置，端口自定义 admin.serverPort=8001 重启zk即可 #/zookeeper/bin/zkServer.sh stop #/zookeeper/bin/zkServer.sh start ...
学习笔记—Zookeeper
huxiutao的博客
05-09 721
一、 入门简介 ZooKeeper是一个分布式协调技术、高性能的、开源的分布式系统的协调(Coordination)服务，是Google的Chubby一个开源的实现，是Hadoop和Hbase的重要组件。它是一个为分布式应用程序一致性和分布式协调技术服务的软件。 是一个基于观察者模式设计的分布式服务管理框架，它负责存储和管理大家都关心的数据，然后接受观察者的注册，一旦这些数据的状态发生变化，Zoo...
zookeeper配置文件详解
marylgao技术专栏
03-24 6413
本文我们主要针对zookeeper配置文件中的各个选项进行讲解，注意本文参数主要针对3.5.5版本 首先zookeeper的配置主要分为以下几个大类，下面我们就会对每一类的参数进行详细讲解 基本参数配置 存储参数配置 网络参数配置 集群参数配置 日志参数配置 权限和角色参数配置 基本参数配置 参数 描述 clientPort 主要定义客户端连接zookeeper server的端口，默认情况下为2181 dataDir 主要用来配置zookeeper server数据的存放路径
Linux安装zookeeper
08-27
要在Linux上安装Zookeeper，您可以按照以下步骤进行操作： 1. 首先，确保您已经安装了Java。Zookeeper是用Java编写的，因此需要Java环境才能运行。您可以通过运行以下命令来检查是否安装了Java： ``` java -version ``` 如果您看到Java的版本信息，则说明已经安装了Java。 2. 下载Zookeeper压缩包。您可以从Zookeeper的官方网站（http://zookeeper.apache.org）下载最新版本的Zookeeper。 3. 解压缩下载的Zookeeper压缩包。您可以使用以下命令解压缩文件： ``` tar -zxvf zookeeper-x.x.x.tar.gz ``` 其中，`x.x.x`是Zookeeper的版本号。 4. 将解压缩后的Zookeeper文件夹移动到所需的目录。例如，您可以将其移动到`/opt`目录下： ``` sudo mv zookeeper-x.x.x /opt/zookeeper ``` 5. 创建Zookeeper的配置文件。复制示例配置文件并进行编辑： ``` cd /opt/zookeeper/conf cp zoo_sample.cfg zoo.cfg nano zoo.cfg ``` 在配置文件中，您可以根据需要进行必要的更改，例如数据目录、端口号等。 6. 启动Zookeeper。使用以下命令启动Zookeeper服务器： ``` cd /opt/zookeeper/bin ./zkServer.sh start ``` 您可以使用`status`命令检查服务器的运行状态： ``` ./zkServer.sh status ``` 如果看到"Mode: standalone"，则表示Zookeeper服务器已成功启动。 现在，您已经成功在Linux上安装了Zookeeper。您可以根据需要进行进一步的配置和使用。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值