ZooKeeper 实战(一) 超详细的单机与集群部署教程（MacOS）

最新推荐文章于 2024-06-10 13:30:40 发布
最新推荐文章于 2024-06-10 13:30:40 发布
阅读量1.4k 收藏 21
点赞数 25
分类专栏： 分布式实战 文章标签： zookeeper macos 分布式 经验分享 java-zookeeper 服务器
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_51513626/article/details/135411958
版权
本文详细介绍了ZooKeeper的单机和集群部署过程，包括下载安装、配置文件修改、启动服务端和客户端，以及集群环境的设置和服务器状态检查。重点讲解了分布式功能如分布式锁、配置管理和服务发现等。
摘要由CSDN通过智能技术生成

文章目录

ZooKeeper 实战(一) 超详细的单机与集群部署教程（MacOS）

0. ZooKeeper简介

ZooKeeper是一个提供包括配置维护、域名服务、分布式同步、组服务等功能的集中式服务。主要功能如下：

  1. 分布式锁：Zookeeper可以帮助开发人员实现分布式锁，用于控制多个节点的并发访问。通过Zookeeper的原子广播和顺序一致性特性，可以实现高效且可靠的分布式锁。

  2. 配置管理：在分布式系统中，节点的配置信息可能需要动态地更改和共享。Zookeeper提供了一个简单而可靠的方式来实现配置的管理，开发人员可以将配置信息存储在Znode中，当配置发生变化时，Zookeeper会及时通知相关的节点。

  3. 命名服务：分布式系统中的节点通常需要有一个唯一的标识符来进行识别。Zookeeper可以提供一个简单的命名服务，根据节点的名称和路径来唯一标识每个节点。

  4. 分布式队列：Zookeeper可以帮助实现分布式系统中的队列功能，多个节点可以通过Zookeeper来访问和操作一个队列。Zookeeper提供了有序的Znode树特性，可以确保队列中的元素按照先进先出的顺序进行处理。

  5. 服务发现：在分布式系统中，节点需要能够发现和连接到其他相关的服务。Zookeeper提供了服务注册和发现的功能，可以帮助节点快速地发现和连接到其他需要的服务。

详细介绍可前往ZooKeeper官网地址。

1. 单机部署

1.1. ZooKeeper下载安装

官方推荐的稳定版本

在这里插入图片描述

（1）前往ZooKeeper官方下载地址选择稳定版本（官方文档中带有Release的版本号），如下图所示，博主选择版本3.7.2。

在这里插入图片描述

（2）选择二进制版本，即以-bin结尾的文件下载。

在这里插入图片描述

（3）下载完成后解压，并重命名文件夹为zk1。

在这里插入图片描述

1.2. 修改配置文件

（1）打开终端，进入conf目录，将zoo_sample.cfg 复制一份并重命名为zoo.cfg。

在这里插入图片描述

（2）输入 vim zoo.cfg 编辑zoo.cfg配置文件，修改数据和日志存放目录。

在这里插入图片描述

1.3. 启动服务端

进入bin目录，输入./zkServer.sh start启动服务端。最后显示Starting zookeeper ... STARTED表示启动成功。

在这里插入图片描述

1.4. 启动客户端

还是在bin目录下，输入./zkCli.sh 启动客户端。最后显示[zk: localhost:2181(CONNECTED) 0] 表示启动成功

在这里插入图片描述

至此单机部署已完成。

2. 集群部署

本次案例在同一台机器上部署，没有使用虚拟机或多台服务器。

2.1. 集群准备

（1）首先将上一节单机部署的zk1文件夹复制两份，分别命名为zk2，zk3。

在这里插入图片描述

（2）修改每个文件夹（zk实例）

配置参数解读：

  • server.A=B:C:D

    • A: 是一个数字，表示这个是第几号服务器。集群模式下配置一个文件 myid，这个文件在 dataDir 目录下，这个文件里面有一个数据 就是 A 的值，Zookeeper 启动时读取此文件，拿到里面的数据与 zoo.cfg 里面的配置信息比较从而判断到底是哪个 server。

    • B 是这个服务器的地址（ip或者主机名）。

    • C 是这个服务器 Follower 与集群中的 Leader 服务器交换信息的端口。

    • D 是万一集群中的 Leader 服务器挂了，需要一个端口来重新进行选举，选出一个新的Leader，而这个端口就是用来执行选举时服务器相互通信的端口。

zk1

（1）进入conf目录，编辑zoo.cfg文件

在这里插入图片描述

tickTime=2000
initLimit=10
syncLimit=5
# 数据文件存放路径
dataDir=../data
# 日志文件存放路径
dataLogDir=../logs
# 客户端连接端口
clientPort=2181
# zookeeper服务器端口号
admin.serverPort=2111
# 服务器列表，详细配置看《配置参数解读》
# 注意由于此处是在同一台机器上配置所有ip都一样，此时后面的端口不要重复了
server.01=127.0.0.1:2341:2351
server.02=127.0.0.1:2342:2352
server.03=127.0.0.1:2343:2353
# 如果部署在不同服务器，参照下方配置
# server.服务器myid=服务器的ip地址或者主机名:主从交流端口:选举端口

（2）进入dataDir所指定的目录，下创建文件myid，并输入01。

在这里插入图片描述

myid文件内容。

在这里插入图片描述

zk2

（1）进入conf目录，编辑zoo.cfg文件（与zk1类似）。注意clientPort和admin.serverPort修改了，同一台服务器端口不要重复。

在这里插入图片描述

tickTime=2000
initLimit=10
syncLimit=5

# 数据文件存放路径
dataDir=../data
# 日志文件存放路径
dataLogDir=../logs

# 客户端连接端口
clientPort=2182
# zookeeper服务器端口号
admin.serverPort=2112

# 服务器列表，详细配置看《配置参数解读》
# 注意由于此处是在同一台机器上配置所有ip都一样，此时后面的端口不要重复了
server.01=127.0.0.1:2341:2351
server.02=127.0.0.1:2342:2352
server.03=127.0.0.1:2343:2353
# 如果部署在不同服务器，参照下方配置
# server.服务器myid=服务器的ip地址或者主机名:主从交流端口:选举端口

（2）进入dataDir所指定的目录，下创建文件myid，并输入02。

在这里插入图片描述

zk3

（1）进入conf目录，编辑zoo.cfg文件（与zk1类似）。注意clientPort和admin.serverPort修改了，同一台服务器端口不要重复。

在这里插入图片描述

tickTime=2000
initLimit=10
syncLimit=5

# 数据文件存放路径
dataDir=../data
# 日志文件存放路径
dataLogDir=../logs

# 客户端连接端口
clientPort=2183
# zookeeper服务器端口号
admin.serverPort=2113

# 服务器列表，详细配置看《配置参数解读》
# 注意由于此处是在同一台机器上配置所有ip都一样，此时后面的端口不要重复了
server.01=127.0.0.1:2341:2351
server.02=127.0.0.1:2342:2352
server.03=127.0.0.1:2343:2353
# 如果部署在不同服务器，参照下方配置
# server.服务器myid=服务器的ip地址或者主机名:主从交流端口:选举端口

（2）进入dataDir所指定的目录，下创建文件myid，并输入03。

在这里插入图片描述

2.2. 启动集群服务器

（1）启动zk1

在这里插入图片描述

（2）启动zk2
在这里插入图片描述

（3）启动zk3

在这里插入图片描述

2.3. 查看服务器状态

（1）zk1 -> follower
在这里插入图片描述

（2）zk2 -> leader

在这里插入图片描述

（3）zk3 -> follower

在这里插入图片描述

至此集群部署完成。

3. 总结

本篇文章旨在教会读者学会部署ZooKeeper，未涉及有关理论和使用的知识。后续将会基于本章部署好的ZooKeeper进行有关各项功能教学。

QQ_AHAO
关注
  • 25
    点赞
  • 踩
  • 21
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
Zookeeper单机部署和集群部署文档.pdf
07-13
ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，是Google的Chubby一个开源的实现，是Hadoop和Hbase的重要组件。 本文档为单机部署和集群部署，带详细目录。
Zookeeper02：Zookeeper安装部署【单机】
weixin_40612128的博客
03-06 4011
一、Zookeeper的安装部署 针对Zookeeper前期不需要掌握太多，只需要掌握Zookeeper的安装部署以及它的基本操作即可。 Zookeeper也支持单机和集群安装，建议大家在学习阶段使用单机即可，单机和集群在操作上没有任何区别。 在这里我们会针对单机和集群这两种方式分别演示一下。 二、Zookeeper的单机部署 1、环境安装jdk1.8 zookeeper需要依赖于jdk，只要保证jdk已经正常安装即可。 linux环境安装jdk见： Linux03：CentOS7.5安装jdk1.8 2、
进阶分布式系统架构系列（三）：Zookeeper 部署（单机与集群）实践
民工哥的博客
08-21 782
点击下方名片，设为星标！回复“1024”获取2TB学习资源！前面介绍了 Zookeeper 基础概念、应用场景等相关的知识点，今天我将详细的为大家介绍 Zookeeper 安装部署相关知识，希望大家能够从中收获多多！如有帮助，请点在看、转发支持一波！！！Zookeeper 有三种部署模式：单机部署：一台集群上运行；集群部署：多台集群运行；伪集群部署：一台集群启动多个 Zookeeper 实例运行。...
搭建Zookeeper单机运行环境
最新发布
冲出仁川，走出马德里，故事还会再继续
06-10 987
这些步骤成功搭建了一个单机环境下的Zookeeper服务，并实现对节点进行CRUD操作。的配置文件，该配置文件是zookeeper的核心配置文件，与zookeeper有关的几乎所有配置都要在此文件中进行定义。，它的主要作用是在某个路径中存储内存中的快照数据，将内存中的数据持久化到该路径中，以便在宕机时可以将数据进行还原。在大部分情况下，使用默认配置即可，但这里需要配置的选项是。在终端中使用如下命令连接zookeeper服务。是Zookeeper的Java Client。使用如下命令启动zookeeper。
zookeeper单机部署
letterss的博客
02-22 705
zookeeper单机部署
Zookeeper：在三种模式下的部署
栗筝i的博客
11-19 3486
zookeeper 安装模式有三种：单机模式：单机单 server；集群模式：多机多 server，形成集群；伪集群模式：单机多 server，形成伪集群。 本篇内容包括：Zookeeper 官网下载、Zookeeper 单机模式部署、Zookeeper 集群安装、Zookeeper 集群安装
zookeeper搭建教程（单机搭建）伪分布模式
qq_64377514的博客
11-10 1220
Leader是ZooKeeper集群的核心，每个ZooKeeper集群中只能有一个Leader，它主要用于处理客户端发送的事务请求，并将事务请求广播到所有Follower，保证处理事务请求的顺序一致性。Follower可以看作是Leader的跟随着，每个ZooKeeper集群中可以包含多个Follower，作用主要有以下4点： 处理客户端发送的非事务请求。将客户端发送的事务请求转发给Leader。参与事务请求投票。参与Leader选举投票。
zookeeper-3.4.13集群一键部署工具
07-16
一键部署工具实现功能如下： 1、支持单节点部署 2、支持伪集群部署 3、支持分布式集群部署 4、支持数据目录、端口参数灵活...说明：工具使用非常简单，只需要修改变量文件，一分钟就可以快速帮你部署zookeeper集群。
Zookeeper集群部署3.5.5.docx
09-14
以下是Zookeeper集群部署3.5.5的详细知识点： 一、前提条件 * 关闭防火墙，以确保集群的安全和可靠性。 二、安装和配置Zookeeper * 解压缩Zookeeper安装包，并创建数据文件和目录文件在Zookeeper的跟目录下。 * ...
快速部署单机zookeeper集群（win环境）
08-03
本文不讲zookeeper集群原理，只谈部署步骤。 默认读者已对zookeeper有最基本的认知，纯粹作为部署笔记，方便回忆。 另外本文是基于Windows部署的，Linux的步骤是基本相同的（只是启动脚本位置不同）。
Zookeeper实战记录（1）-安装部署
01-20
【Zookeeper实战记录（1）-安装部署】 Zookeeper是一个由Apache基金会开发的开源分布式协调服务，它在分布式系统中扮演着重要的角色。Zookeeper的主要功能包括统一命名服务、统一配置管理、统一集群管理、服务器...
zookeeper系列：单机模式部署
哇哇哇，真的学到了！！！
01-19 3985
一、官方网站下载安装包 Index of /zookeeper 选择需要的版本，下载相关压缩包（例：apache-zookeeper-3.7.0-bin.tar.gz） 二、正式安装 1、解压目录，并且新建data目录 [root@i-slebi7x6 opt]# cd zookeeper/ [root@i-slebi7x6 zookeeper]# ls apache-zookeeper-3.7.0.tar.gz [root@i-slebi7x6 zookeeper]# tar -z..
ZooKeeper【部署 01】单机版安装+配置+添加到service服务+开机启动配置
2401_84264727的博客
05-13 1292
Linux chkconfig 命令用于检查，设置系统的各种服务。这是 Red Hat 公司遵循 GPL 规则所开发的程序，它可查询操作系统在每一个执行等级中会执行哪些系统服务，其中包括各类常驻服务。这个方向初期比较容易入门一些，掌握一些基本技术，拿起各种现成的工具就可以开黑了。对于从来没有接触过网络安全的同学，我们帮你准备了详细的学习成长路线图。可以说是最科学最系统的学习路线，大家跟着这个大的方向学习准没问题。至此，zookeeper单机版部署成功。因篇幅有限，仅展示部分资料。
Zookeeper安装部署与基本使用
qq_44528357的博客
11-17 2835
zk单机与集群部署以及相关基础命令使用
最全的手把手单机 部署伪集群zookeeper和kafka
阳光
06-25 412
创建目录，上传包编辑zk节点1配置文件主要修改如下几个地方，端口都要修改，日志目录每个节点都不一样才可以创建节点id文件节点1配置结束复制节点2和节点3配置节点2修改如下创建节点id文件配置节点3修改如下创建节点id文件启动zk查看zk节点状态。
Zookeeper的本地安装部署和分布式安装部署
Cocobuhui的博客
01-21 1930
Zookeeper的本地安装部署和分布式安装部署
Zookeeper单机集群部署
qq_41354978的博客
09-23 1504
一、伪集群搭建 1、搭建准备 1、zk下载地址：https://archive.apache.org/dist/zookeeper/ 2、集群节点数必须是基数，通过选举确定主节点，选举规则：可用节点数>总节点数/2（防止脑裂(分裂成多个集群)、zk/es） 3、zk集群至少有3个节点 2、开始搭建 创建数据目录和日志目录:（/data/zoo-1、/data/zoo-2、/data/zoo-3| /log/zoo-1、/log/zoo-2、/log/zoo-3） 每个节点数据目录(/d.
【zookeeper、kafka部署及java项目应用实战】
weixin_42533448的博客
07-11 671
小白快速入门kafka
zookeeper-安装部署
line_on_database的博客
08-16 1317
详情可以查看。
docker 集群化部署 部署一个zookeeper集群的详细步骤
05-30
下面是在Docker Swarm集群中部署Zookeeper集群的详细步骤： 1. 准备Docker环境：需要在每个节点上安装Docker，并且启动Docker服务。 2. 初始化Swarm：选择一个节点作为管理节点，并在该节点上执行`docker swarm init`命令来初始化Swarm集群。 3. 加入节点：在其他节点上执行`docker swarm join`命令，将其加入Swarm集群。 4. 创建Zookeeper镜像：可以使用官方提供的Zookeeper镜像，使用Dockerfile自己构建也可以。 5. 创建Zookeeper配置文件：在Swarm集群管理节点上创建一个zookeeper配置文件，例如`zoo.cfg`，并设置Zookeeper集群的相关配置。 6. 创建Zookeeper服务：使用`docker service create`命令创建Zookeeper服务，并指定需要运行的镜像、端口等参数，同时将上一步创建的配置文件挂载到容器中。 ``` docker service create \ --name zookeeper \ --replicas 3 \ --mount type=bind,source=/path/to/zoo.cfg,target=/conf/zoo.cfg \ --publish 2181:2181 \ --network my-network \ zookeeper:latest ``` 其中，`--replicas`参数指定了需要运行的Zookeeper实例数，`--mount`参数指定了将配置文件挂载到容器中，`--publish`参数指定了需要暴露的端口，`--network`参数指定了使用的网络。 7. 验证Zookeeper集群：使用Zookeeper客户端工具连接到Zookeeper服务，验证集群是否正常工作。 ``` docker run --rm -it --network my-network zookeeper:latest zkCli.sh -server zookeeper:2181 ``` 以上就是在Docker Swarm集群中部署Zookeeper集群的详细步骤。通过Docker Swarm进行集群化部署，可以方便地扩展和管理Zookeeper服务，以及提高服务的可靠性和稳定性。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值