zookeeper安装：单机模式、伪集群模式、集群模式

最新推荐文章于 2024-04-27 22:55:06 发布
最新推荐文章于 2024-04-27 22:55:06 发布
阅读量467 收藏
点赞数
分类专栏： zookeeper 文章标签： zookeeper vagrant
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u010075335/article/details/82861369
版权

zookeeper的安装分为三种模式： 单机模式、伪集群模式和集群模式。

安装需要用到的zookeeper文件，到http://zookeeper.apache.org/通过download链接下载。

一、单机模式安装zookeeper

1、设置环境变量
$ ZK_FILE=/vagrant/zookeeper-3.4.13.tar.gz
$ ZK_INSTALL_PATH=/opt/zk
$ ZK_INSTALL_DIR=$ZK_INSTALL_PATH/zookeeper-3.4.13
$ ZK_DATA_DIR=$ZK_INSTALL_PATH/zookeeper-3.4.13/data 
$ ZK_LOG_DIR=$ZK_INSTALL_PATH/zookeeper-3.4.13/log
$ ZK_CFG=$ZK_INSTALL_DIR/conf/zoo.cfg 
$ ZK_SERVER_ID=1
$ ZK_PORT=2181
$ ZK_SERVER_LIST=server.1=127.0.0.1:2888:3888

prepare-install-env

2、创建安装目录并将zk到解压安装目录
$ mkdir -p $ZK_INSTALL_PATH	
$ tar -zxvf $ZK_FILE -C $ZK_INSTALL_PATH >> /var/null
$ ls -l $ZK_INSTALL_PATH

make-dir-and-uzip

3、新建数据和日志目录，生成myid文件，拷贝配置zoo.cfg文件
$ mkdir $ZK_DATA_DIR
$ mkdir $ZK_LOG_DIR
$ echo $ZK_SERVER_ID >> $ZK_DATA_DIR/myid
$ cp $ZK_INSTALL_DIR/conf/zoo_sample.cfg $ZK_CFG
$ cat $ZK_CFG

copy-zoo-cfg

4、配置zoo.cfg数据目录、日志目录、端口号、服务器列表并确认配置
$ sed -i 's#dataDir=/tmp/zookeeper#dataDir='$ZK_DATA_DIR'#' $ZK_CFG
$ sed -i '$a \dataLogDir='$ZK_LOG_DIR  $ZK_CFG
$ sed -i 's/2181/'$ZK_PORT'/g' $ZK_CFG
$ sed -i '$a \'$ZK_SERVER_LIST $ZK_CFG

$ cat $ZK_CFG

config-zoo-cfg

5、启动zk并查看状态
$ sh $ZK_INSTALL_DIR/bin/zkServer.sh start 
$ sh $ZK_INSTALL_DIR/bin/zkServer.sh status

start-zookeeper

6、利用zkCli操作zk
$ sh $ZK_INSTALL_DIR/bin/zkCli.sh

use-zk-cli

可以输入以下命令进行操作, 查看结果

> ls / 
> create /test value1
> get /test

zk-cli-command

二、通过vagrant一键安装单机版的zookeeper

1、整理一中的shell命令成zk-install.sh脚本文件
echo ">>>>>>>>>>>>>>>>>>>>>>>>>>>>zk压缩包路径>>>>>>>>>>>>>>>>>>>>>>>>>>>>"
echo $ZK_FILE
echo ">>>>>>>>>>>>>>>>>>>>>>>>>>>>>zk安装路径&安装目录>>>>>>>>>>>>>>>>>>>>>"
echo $ZK_INSTALL_PATH
echo $ZK_INSTALL_DIR
echo ">>>>>>>>>>>>>>>>>>>>>>>>>>>>zk数据目录&日志目录>>>>>>>>>>>>>>>>>>>>>"
echo $ZK_DATA_DIR
echo $ZK_LOG_DIR
echo ">>>>>>>>>>>>>>>>>>>>>>>>>>>>>>zk的myid>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>"
echo $ZK_SERVER_ID
echo ">>>>>>>>>>>>>>>>>>>>>>>>>zk端口及服务器列表>>>>>>>>>>>>>>>>>>>>>>>>>"
echo $ZK_PORT
echo $ZK_SERVER_LIST

echo ">>>>>>>>>>>>>>>>>>>>>>>>>>>>>zk配置文件>>>>>>>>>>>>>>>>>>>>>>>>>>>>>"
ZK_CFG=$ZK_INSTALL_DIR/conf/zoo.cfg
echo $ZK_CFG

echo ">>>>>>>>>>>>>>>>>>>>新建zk安装目录并解压zk到该目录>>>>>>>>>>>>>>>>>>>" 
mkdir -p $ZK_INSTALL_PATH	

tar -zxvf $ZK_FILE -C $ZK_INSTALL_PATH >> /var/null


echo ">>>>>>>>>>>>>>>>>>>>>新建zk数据和日志目录及myid>>>>>>>>>>>>>>>>>>>>>" 
mkdir $ZK_DATA_DIR
mkdir $ZK_LOG_DIR
echo $ZK_SERVER_ID >> $ZK_DATA_DIR/myid

echo ">>>>>>>>>>>>>>>>>>>>>>>>>>>>配置zoo.cfg>>>>>>>>>>>>>>>>>>>>>>>>>>>>>" 
cp $ZK_INSTALL_DIR/conf/zoo_sample.cfg $ZK_CFG

sed -i 's#dataDir=/tmp/zookeeper#dataDir='$ZK_DATA_DIR'#' $ZK_CFG
sed -i '$a \dataLogDir='$ZK_LOG_DIR  $ZK_CFG
sed -i 's/2181/'$ZK_PORT'/g' $ZK_CFG
sed -i '$a \'$ZK_SERVER_LIST $ZK_CFG

tail -n 20 $ZK_CFG
echo ">>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>启动zk>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>" 	
sh $ZK_INSTALL_DIR/bin/zkServer.sh start
2、新建Vagrantfile文件
# -*- mode: ruby -*-
# vi: set ft=ruby :

Vagrant.configure("2") do |config|
	#设置虚拟机的box
	config.vm.box = "centos7-base-jdk8"

	
	#设置虚拟机的主机名
	config.vm.hostname = "centos7-jdk8-zk-standalone"
	#设置ip
	config.vm.network "private_network", ip: "192.168.13.10"
	#Virtualbox相关配置
	config.vm.provider "virtualbox" do |v|
		#设置虚拟机的名称
		v.name = "centos7-jdk8-zk-standalone"
		
		#设置虚拟机的内存大小为2G
		v.memory = 2048 
		
		#设置虚拟机的CPU个数
		v.cpus = 2 
	end 

	#使用shell脚本进行软件安装和配置
	config.vm.provision "shell" do |s| 
		s.path = "zk-install.sh"
		s.env = {ZK_FILE: "/vagrant/zookeeper-3.4.13.tar.gz",
			ZK_INSTALL_PATH: "/opt/zk", 
			ZK_INSTALL_DIR: "/opt/zk/zookeeper-3.4.13", 
			ZK_PORT: "2181",  
			ZK_DATA_DIR: "/opt/zk/zookeeper-3.4.13/data", 
			ZK_LOG_DIR: "/opt/zk/zookeeper-3.4.13/log", 
			ZK_SERVER_ID: "1", 
			ZK_SERVER_LIST: "server.1=127.0.0.1:2888:3888"}
	end
end
3、通过vagrant up启动虚拟机

vagrant-up-standardlone-1

vagrant-up-standardlone-2

三、通过vagrant一键安装zookeeper伪集群

1、zk伪集群指的是在一台集群上安装zk集群

需要注意每个zk进程对外端口（默认2181，用于客户端链接zk集群），选主端口（默认3888-进行leader选举时使用的端口），集群通信端口（默认2888-集群follow链接leader的通信端口）配置不冲突。
myid=1, 2181, 2888, 3888
myid=2, 2182, 2887, 3887
myid=3, 2183, 2886, 3886

2、zk-install.sh同二使用的是相同内容，Vagrantfile如下：

# -*- mode: ruby -*-
# vi: set ft=ruby :
	
Vagrant.configure("2") do |config|
	#设置虚拟机的box
	config.vm.box = "centos7-base-jdk8"
	
	#设置虚拟机的主机名
	config.vm.hostname = "centos7-jdk-zk-local-cluster"
	
	#Virtualbox相关配置
	config.vm.provider "virtualbox" do |v|
		#设置虚拟机的名称
		v.name = "centos7-jdk-zk-local-cluster"
		
		#设置虚拟机的内存大小为1G
		v.memory = 2048 
		
		#设置虚拟机的CPU个数
		v.cpus = 2 
	end 
	

	(1..3).each do |i| 
	#使用shell脚本进行软件安装和配置
		config.vm.provision "shell" do |s| 
			s.path = "zk-install.sh"
			s.env = {ZK_FILE: "/vagrant/zookeeper-3.4.13.tar.gz",
				ZK_INSTALL_PATH: "/opt/zk/zk-server#{i}", 
				ZK_INSTALL_DIR: "/opt/zk/zk-server#{i}/zookeeper-3.4.13", 
				ZK_PORT: "218#{i}",  
				ZK_DATA_DIR: "/opt/zk/zk-server#{i}/zookeeper-3.4.13/data", 
				ZK_LOG_DIR: "/opt/zk/zk-server#{i}/zookeeper-3.4.13/log", 
				ZK_SERVER_ID: "#{i}", 
				ZK_SERVER_LIST: "server.1=127.0.0.1:2888:3888\\nserver.2=127.0.0.1:2887:3887\\nserver.3=127.0.0.1:2886:3886"}
		end 
    end 		
end
3、同样使用vagrant up 命令，可以启动虚拟机，并自动安装
4、ssh进入虚拟机， 查看各个目录下对应的zk安装情况

可以看到，zk-server2作为leader节点， 其他两个节点作为follower节点

zk-local-cluster-status

5、可以通过xshell给三个节点的zkCli.sh 分别发送命令，

zk-local-cluster-cli

四、通过vagrant一键安装zookeeper集群

1、集群ip规划

zk_server1 => 1 192.168.13.21 centos7-jdk-zk-cluster-1
zk_server2 => 2 192.168.13.22 centos7-jdk-zk-cluster-2
zk_server3 => 3 192.168.13.23 centos7-jdk-zk-cluster-3

2、zk-install.sh同二使用的是相同内容，Vagrantfile如下：
# -*- mode: ruby -*-
# vi: set ft=ruby :

Vagrant.configure("2") do |config|
	#设置虚拟机的box
	config.vm.box = "centos7-base-jdk8"
	
	zk_servers = {
		:zk_server1 => ["192.168.13.21", "1", "centos7-jdk-zk-cluster-1"], 
		:zk_server2 => ["192.168.13.22", "2", "centos7-jdk-zk-cluster-2"], 
		:zk_server3 => ["192.168.13.23", "3", "centos7-jdk-zk-cluster-3"]
	}
	zk_server_list = "server.1=192.168.13.21:2888:3888\\nserver.2=192.168.13.22:2888:3888\\nserver.3=192.168.13.23:2888:3888"
	
	zk_servers.each do |zk_server_name, zk_server_cfg| 
		config.vm.define zk_server_name do |app_config| 
			
			#设置虚拟机的主机名
			app_config.vm.hostname = zk_server_cfg[2]
			#设置ip
			app_config.vm.network "private_network", ip: zk_server_cfg[0]
			#Virtualbox相关配置
			app_config.vm.provider "virtualbox" do |v|
				#设置虚拟机的名称
				v.name = zk_server_cfg[2]
				
				#设置虚拟机的内存大小为1G
				v.memory = 1048 
				
				#设置虚拟机的CPU个数
				v.cpus = 2 
			end 

			#使用shell脚本进行软件安装和配置
			app_config.vm.provision "shell" do |s| 
				s.path = "zk-install.sh"
				s.env = {ZK_FILE: "/vagrant/zookeeper-3.4.13.tar.gz",
					ZK_INSTALL_PATH: "/opt/zk", 
					ZK_INSTALL_DIR: "/opt/zk/zookeeper-3.4.13", 
					ZK_PORT: "2181",  
					ZK_DATA_DIR: "/opt/zk/zookeeper-3.4.13/data", 
					ZK_LOG_DIR: "/opt/zk/zookeeper-3.4.13/log", 
					ZK_SERVER_ID: zk_server_cfg[1], 
					ZK_SERVER_LIST: zk_server_list}
			end
		end 
	end 
end
3、通过vagrant up 拉起三台虚拟机，并自动安装zk

安装完毕后，进入虚拟机，确认是否安装正确

zk-cluster-status

OK, 到这里就结束了， 三种模式的安装通过vagrant可以快速安装实验环境。

run_zheng
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
Zookeeper伪集群模式配置
需要远程指导仿真实验、代码有问题的，请后台私信或者关注公众号
06-26 582
本实验任务主要完成基于ubuntu环境的搭建Zookeeper伪集群模式的环境工作。通过完成本实验任务，要求学生熟练掌握搭建Zookeeper伪集群模式的环境的方法，为后续实验的开展奠定zookeeper平台基础，也为从事大数据平台运维工程师、大数据技术支持工程师等岗位工作奠定夯实的技能基础。1、掌握Zookeeper伪集群模式的环境搭建Ubuntu、Zookeeper3.4.5Apache Zookeeper 由 Apache Hadoop 的 Zookeeper 子项目发展而来，现已经成为 Apache
ZooKeeper伪集群模式
yangsnow_rain_wind的专栏
06-20 295
伪集群模式：就是在一台物理机上运行多个Zookeeper 实例 在一台机器上部署了3个server，要满足以下条件 1. 端口号不能冲突，除了clientPort不同之外， 2. dataDir也不同。 3. 创建myid, 在dataDir所对应的目录中创建myid文件来指定对应的Zookeeper服务器实例。 安装部署 1.下载解压 解压到目录：/usr/local/...
zk单机伪集群搭建
一个白馒头的博客
10-08 452
注意：本文基于zk伪集群 localhost，127.0.0.1，本地IP cat /etc/hosts可以发现，操作系统将localhost 和 127.0.0.1绑定在了一起 localhost和127.0.0.1都可以ping pong的方式来看本地ip/tcp是否正常 localhost 和 127.0.0.1是不经网卡传输，不受网络防火墙和网卡相关的的限制。 本地IP需要通过网络防火墙和网卡的限制，这也就是为什么用localhost 和 127.0.0.1就可以，但是使用本地IP不可以的原因 z
ZooKeeper 搭建详细步骤之一（单机模式）
最新发布
zp8126的专栏
04-27 2377
ZooKeeper 的搭建模式包括单机模式、集群模式和伪集群模式，分别适用于不同的场景和需求，从简单的单节点测试环境到复杂的多节点高可用生产环境。在实际部署时，应根据系统的可用性要求、数据量、并发负载等因素选择合适的部署模式。
搭建Zookeeper伪分布式集群
qq_41172638的博客
10-29 1626
zookeeper伪分布式集群的搭建。
zookeeper单机模式与集群模式的配置与安装
Java_Mrsun的博客
06-28 955
        ZooKeeper 是一个为分布式应用所设计的分布的、开源的协调服务。设计 ZooKeeper 的目的是为了减轻分布式应程序所承担的协调任务，借助于 zookeeper 服务开发出高可靠的分布式协同程序。       ZooKeeper 是构建dubbo框架最主要的组件学习zookeeper是学习dubbo框架的必学知识和最重要组成部分。ZooKeeper 的安装：方式1.单机模式...
zookeeper单机模式，伪分布式，集群模式安装教程（按照步骤来，100%能成功）
Poppy_Evan的博客
03-08 3281
前期准备：注意：用于我已经做了映射（ip地址和服务器名字），所以我写的是各个服务器的名字，如果你没有做映射，用ip地址即可。我的3台服务器名字分别是 hadoop02 hadoop03 hadoop04 1，官网下载安装包（不会下载的，留言邮箱我给你发安装包，有什么不懂的也可以问）  http://mirrors.shu.edu.cn/apache/zookeeper/ 点击文件夹，选择以tar....
zookeeper 安装的三种模式
MayMatrix 的博客
07-20 967
Zookeeper安装 　　zookeeper的安装分为三种模式：单机模式、集群模式和伪集群模式。 单机模式 　　　　首先，从Apache官网下载一个Zookeeper稳定版本，本次教程采用的是zookeeper-3.4.9版本。 http://apache.fayea.com/zookeeper/zookeeper-3.4.9/
单机搭建zookeeper伪集群
热门推荐
人不风流枉少年
09-13 1万+
一：简介 所谓单机搭建zookeeper集群其实就是在一台机器上启动多个zookeeper，在启动zookeeper时分别使用不同的配置文件zoo.cfg来启动,每个配置文件使用不同的配置参数(clientPort端口号、dataDir数据目录、dataLogDir数据日志目录)在同一台集群上启动多次 二：单机搭建zookeeper集群 配置多个zoo.cfg配置文件 zoo1.c...
Zk笔记（一）：Zookeeper的两种安装和配置（Windows）：单机模式与集群模式
Leon的专栏
03-06 1万+
Zookeeper有两种运行模式：集群模式和单机模式。 安装环境   1.系统环境     zk对不同系统环境支持都很好，在绝大多数主流的操作系统上都能够正常运行，如：GNU/linux、Sun Solaris、Win32以及MacOSX等。需要注意的是，Zookeeper官方文档中特别强调，由于FreeBSD系统的JVM对Java的NIO Selector支持得不是很好，所以不建议
zookeeper伪集群安装流程
01-11
zookeeper伪集群安装流程,在一台机器上安装三个集群节点操作步骤。
关于Zookeeper一键启动/关闭脚本所产生的乌龙事件
01-09
大家都知道在Hadoop集群开启/关闭Zookeeper集群的时候，需要到不同的节点ZK的bin目录下执行对应的启动/关闭脚本，十分的麻烦。所以就有了以下脚本的产生~          一键开启Zookeeper vim /export/servers/zookeeper-3.4.5-cdh5.14.0/bin/zk_startall.sh for host in node01 node02 node03 do ssh $host source /etc/profile;nohup /export/servers/zookeeper-3.4.5-cdh5.14.0/bin/z
Zookeeper单机模式和集群模式的安装和配置
逝唁的博客
10-08 876
1、ZooKeeper的概述:  ZooKeeper是一款分布式应用程序的协调框架，是大数据应用的重要组件。  ZooKeeper主要解决了分布式环境下的数据统一性、分布式环境下的统一命名服务、分布式环境下的配置管理、分布式环境下的分布式锁、集群管理问题。                                                单机模式配置: 2、环境准备: 虚拟机...
zookeeper手把手搭建伪分布集群环境
ahzsg1314的专栏
09-05 3923
很多初学hbase、hive、kafka等hadoop生态圈的分布式组件的同仁都会面临在本地搭建zookeeper集群的情况，但是鉴于本地机器环境不满足多节点安装的时候，一个很好的替换措施就是本地搭建伪分布环境，这样既能充分了解分布式环境部署需要的基础配置参数，也能学习到集群的运维等。本问就是基本的zookeeper本地伪分布环境搭手把手建过程，如有错误还请读者能不吝指出，共同学习。文中配置文件路径依赖于自己的环境需求
Zookeeper实战之单机集群模式
kongxx的专栏
11-12 1万+
原文链接：
Zookeeper集群部署之单机模式、伪集群模式、集群模式
PandaMan~的博客
09-17 1731
Zookeeper 是一个开源的分布式的，为分布式框架提供协调服务的 Apache 项目。提供的服务包括:统一命名服务、统一配置管理、统一集群管理、服务器节点动态上下线、软负载均衡等。
zookeeper集群shell脚本全启动
疯狂的1024
07-14 6876
我们的zookeeper要全部都启动，我们不可能一次启动一个bin/zkServer.sh start。因为如果我们如果有100台集群的zookeeper，这个时候每一台都单独启动很麻烦，这个时候我们就使用shell脚本进行。这样我们只需要在集群的一个zookeeper上面运行一个shell脚本，这个就能将其他的zookeeper都启动。首先这个shell脚本代码：#!/bin/sh echo "...
Zookeeper服务部署方式简介：单机、伪集群、集群模式安装指南
Zookeeper的安装方式有三种，分别是单机模式、伪集群模式和集群模式。在单机模式下，Zookeeper只运行在一台服务器上，适合用于测试环境或者小规模的应用场景。而伪集群模式则是在一台物理机上运行多个Zookeeper实例...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

run_zheng

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值