Zookeeper

最新推荐文章于 2024-09-30 08:05:35 发布
最新推荐文章于 2024-09-30 08:05:35 发布
阅读量246 收藏
点赞数
文章标签： linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/claroja/article/details/100095178
版权

功能

1.为客户端管理少量数据，key=value形式,key是路径(节点),values是字符串,
例子:

/a "helloworld"

2.为客户端监听指定节点的状态,就是上述的key

使用场景

1.多台服务器,共有相同配置文件,可以将配置文件放在zookeeper中,更改zookeeper中的配置文件,zookeeper就可以自动通知多台服务器
2.服务器的上线和下线感知.服务器启动时向zoo注册ip,port等信息,客户端启动向zoo请求服务器的信息,如果某台服务器挂掉,zoo会发消息给客户端

安装zookeeper

删除安装包里的src和docs文件夹

1.修改配置文件
conf/zoo_sample.cfg 改为conf/zoo.cfg

# 修改
dataDir=/root/zkdata # 修改数据存储路径,要自己新建,生成文件myid,内容为对应服务器编号(1,2,3)
# 添加
server.1=ip1:2888:3888  # 最好是奇数台
server.2=ip2:2888:3888  # 端口3888是投票选leader,2888是投票后用来通信的
server.3=ip3:2888:3888

到ip1上新建目录/root/zkdata,并新建文件myid内容为1
到ip2上新建目录/root/zkdata,并新建文件myid内容为2
到ip3上新建目录/root/zkdata,并新建文件myid内容为3

配置文件修改完后，将安装包拷贝给ip2 和ip3

2.建立存储文件
到ip1上，新建数据目录/root/zkdata，生成一个文件myid，内容为1
到ip2上，新建数据目录/root/zkdata，生成一个文件myid，内容为2
到ip3上，新建数据目录/root/zkdata，生成一个文件myid，内容为3

3.启动zookeeper
bin/zkServer.sh start 会有QuorumPeerMain进程启动
bin/zkServer.sh status 查看状态,会有mod指明是leader还是flower

我们杀死任何一台机器的zookeeper,就会重新生成新的leader

一键启动脚本

for host in ip1 ip2 ip3
do
echo "${host}:${1}ing...."
ssh $host "source /etc/profile;/root/usr/local/zookeeper/bin/zkServer.sh ${1}" # ssh非正常登陆,不会加载profile文件,所以要手动加载
done

命令行客户端

ZooKeeper -server host:port cmd args
        stat path [watch]
        set path data [version]
        ls path [watch]
        delquota [-n|-b] path
        ls2 path [watch]
        setAcl path acl
        setquota -n|-b val path
        history
        redo cmdno
        printwatches on|off
        delete path [version]
        sync path
        listquota path
        rmr path
        get path [watch]
        create [-s] [-e] path data acl
        addauth scheme auth
        quit
        getAcl path
        close
        connect host:port
方法描述
lsls / 查看节点
getget /zookeeper 获得节点数据
createcreate /a "hellozoo" 创建节点(key) 和数据(value)
rmrrmr /a 删除节点
setset /a "hizoo" 更改节点内容
watchget /a watch 监听a节点内容,只起到一次作用

ls /a watch 监听节点变化

例子:

  1. 数据一致性
[zk: localhost:2181(CONNECTED) 2] create /a "hellozoo"
Created /a
[zk: localhost:2181(CONNECTED) 3] get /a
"hellozoo"
cZxid = 0x100000002
ctime = Thu Nov 07 22:15:19 EST 2019
mZxid = 0x100000002
mtime = Thu Nov 07 22:15:19 EST 2019
pZxid = 0x100000002
cversion = 0
dataVersion = 0
aclVersion = 0
ephemeralOwner = 0x0
dataLength = 10
numChildren = 0
[zk: localhost:2181(CONNECTED) 4] set /a "hellohaddoop"
cZxid = 0x100000002
ctime = Thu Nov 07 22:15:19 EST 2019
mZxid = 0x100000003
mtime = Thu Nov 07 22:15:50 EST 2019
pZxid = 0x100000002
cversion = 0
dataVersion = 1
aclVersion = 0
ephemeralOwner = 0x0
dataLength = 14
numChildren = 0

dataVersion 每更改一次都会计数
dataLength 数据的长度
numChildren 子节点数量

2.监听

`ls /a watch` 监听节点变化,其他端口更改了节点,会受到消息,一次性
`get /a watch` 监听节点变化,其他端口更改了节点内容,会受到消息,一次性

node多种类型

create [-s] [-e] path data acl

1、PERSISTENT 持久的：创建者就算跟集群断开联系，该类节点也会持久存在与zk集群中
2、EPHEMERAL 短暂的：创建者一旦跟集群断开联系，zk就会将这个节点删除
3、SEQUENTIAL 带序号的：这类节点，zk会自动拼接上一个序号，而且序号是递增的

组合类型：
PERSISTENT ：持久不带序号
EPHEMERAL ：短暂不带序号
PERSISTENT 且 SEQUENTIAL ：持久且带序号
EPHEMERAL 且 SEQUENTIAL ：短暂且带序号

javaAPI

依赖:

zookeeper-3.4.6.jar
/lib/jline-xxx.jar
/lib/log4j-xxx.jar
/lib/netty-xxx.jar
/lib/slf4j-api-xxx.jar
/lib/slf4j-log4j12-xxx.jar

增删改查

package demo;
import java.io.UnsupportedEncodingException;
import java.util.List;
import org.apache.zookeeper.CreateMode;
import org.apache.zookeeper.KeeperException;
import org.apache.zookeeper.ZooDefs.Ids;
import org.apache.zookeeper.ZooKeeper;
import org.junit.Before;
import org.junit.Test;

public class ZookeeperClientDemo {
	ZooKeeper zk = null;
	@Before
	public void init()  throws Exception{
		// 构造zookeeper的客户端对象,第一个参数传入多个值,以防某个几点挂掉
		zk = new ZooKeeper("ip1:2181,ip2:2181,ip3:2181", 2000, null);
	}
	
	@Test //增
	public void testCreate() throws Exception{
		// 要创建的节点路径  ;数据  ;访问权限  ;节点类型
		String create = zk.create("/zoo", "hello zoo".getBytes(), Ids.OPEN_ACL_UNSAFE, CreateMode.PERSISTENT);
		System.out.println(create);
		zk.close();
	}
	
	@Test  //改
	public void testUpdate() throws Exception {
		// 节点路径  ;数据   ;所要修改的版本，-1代表任何版本
		zk.setData("/zoo", "hello".getBytes("UTF-8"), -1);
		zk.close();
	}
	
	
	@Test	//查
	public void testGet() throws Exception {
		// ;节点路径    ;是否要监听    ;所要获取的数据的版本,null表示最新版本
		byte[] data = zk.getData("/zoo", false, null);
		System.out.println(new String(data,"UTF-8"));
		zk.close();
	}
	
	@Test	//查
	public void testListChildren() throws Exception {
		// 节点路径    ;是否要监听   
		List<String> children = zk.getChildren("/zoo", false);
		for (String child : children) {
			System.out.println(child);
		}
		zk.close();
	}
	
	@Test //删
	public void testRm() throws InterruptedException, KeeperException{
		zk.delete("/zoo", -1);
		zk.close();
	}
}

监听

package demo;
import java.util.List;
import org.apache.zookeeper.KeeperException;
import org.apache.zookeeper.WatchedEvent;
import org.apache.zookeeper.Watcher;
import org.apache.zookeeper.Watcher.Event.EventType;
import org.apache.zookeeper.Watcher.Event.KeeperState;
import org.apache.zookeeper.ZooKeeper;
import org.junit.Before;
import org.junit.Test;

public class ZookeeperWatchDemo {
	ZooKeeper zk = null;
	@Before
	public void init() throws Exception {
		// 构造一个连接zookeeper的客户端对象
		zk = new ZooKeeper("ip1:2181,ip2:2181,ip3:2181", 2000, new Watcher() {
			@Override
			public void process(WatchedEvent event) {
				//先判断是否是新建,如果是新建状态则不回调
				if (event.getState() == KeeperState.SyncConnected && event.getType() == EventType.NodeDataChanged) {
					System.out.println(event.getPath()); // 收到的事件所发生的节点路径
					System.out.println(event.getType()); // 收到的事件的类型
					System.out.println("内容更改了"); // 收到事件后，我们的处理逻辑
		
					try {
						zk.getData("/zoo", true, null);

					} catch (KeeperException | InterruptedException e) {
						e.printStackTrace();
					}
					//判断子节点发生变化的回调
				}else if(event.getState() == KeeperState.SyncConnected && event.getType() == EventType.NodeChildrenChanged){
					System.out.println("子节点变化了..");
				}
			}
		});
	}

	@Test
	public void testGetWatch() throws Exception {
		byte[] data = zk.getData("/zoo", true, null); // 监听节点数据变化
		List<String> children = zk.getChildren("/zoo", true); //监听节点的子节点变化事件
		System.out.println(new String(data, "UTF-8"));
		Thread.sleep(Long.MAX_VALUE);//不能zk.close(),关闭后不能监听,也不能什么也没有,运行完会自动关闭,所以要sleep,如果有消息来回zk会再启动一个线程
	}
}
Claroja
关注
zookeeper 3.8.4
05-17
**ZooKeeper 3.8.4：分布式协调服务详解** Apache ZooKeeper 是一个高度可靠的分布式协调服务，广泛应用于大数据、云计算以及微服务等领域的分布式系统中。Zookeeper 3.8.4 版本是该项目的最新稳定版本，提供了一...
zookeeper-3.9.1.zip
12-19
Apache ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，它是集群的管理者，监视着分布式应用程序的运行状态，提供诸如命名服务、配置管理、分布式同步、组服务等分布式基础服务。Zookeeper的设计目标...
ZooKeeper
学习记录和总结
06-05 1万+
ZooKeeper的概述，单体安装以及分布式安装、客户端操作命令以及Java客户端操作
zookeeper集群
weixin_55609824的博客
07-26 1万+
目录一、Zookeeper定义二、 zookeeper工作机制三、zookeeper特点四、Zookeeper数据结构五、zookeeper应用场景六、/l zookeeper选举机制 一、Zookeeper定义 Zookeeper是一个开源的分布式的，为分布式框架提供协调服务的Apache项目。 二、 zookeeper工作机制 Zookeeper从设计模式角度来理解:是一个基于观察者模式设计的分布式服务管理框架它负责存储和管理大家都关心的数据，然后接受观察者的注册，一旦这些数据的状态发生变化，Zooke
Zookeeper概述
亦翼的博客
08-05 2858
文章目录Zookeeper概述工作机制特点数据结构应用场景统一命名服务统一配置管理服务器节点动态上下线软负载均衡下载地址Zookeeper本地模式安装安装前的准备修改配置相关操作配置参数解读Zookeeper内部原理选举机制节点类型监听器原理数据写入流程 Zookeeper概述 百度百科：ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，是Google的Chubby一个开源的实现，是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件，提供的功能包括：配置维护、域
ZooKeeper 集群
qq_39144436的博客
03-22 4761
为了保证高可用，最好是以集群形态来部署 ZooKeeper，这样只要集群中大部分机器是可用的（能够容忍一定的机器故障），那么 ZooKeeper 本身仍然是可用的。通常 3 台服务器就可以构成一个 ZooKeeper 集群了。ZooKeeper 官方提供的架构图就是一个 ZooKeeper 集群整体对外提供服务。 上图中每一个 Server 代表一个安装 ZooKeeper 服务的服务器。组成 ZooKeeper 服务的服务器都会在内存中维护当前的服务器状态，并且每台服务器之间都互相保持着通信。集群间
1、zookeeper3.7.1安装与验证
热门推荐
alanchanchn的专栏
04-21 5万+
zookeeper的安装与验证分为4个部分，即环境准备、部署、验证和环境变量设置。由于zookeeper需要非root用户，所以需要创建用户alanchan。zookeeper集群需要奇数台机器，本示例使用3台机器，机器名称分别为server1、server2、server3。本集群是centos6版本。本示例是在已经安装完jdk8的环境中进行操作的，如果没有安装jdk，则需要提前安装jdk。
Zookeeper详解
企业实战系列集 ●●● https://ximenjianxue.blog.csdn.net
09-04 1万+
ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，是Google的Chubby一个开源的实现，是Hadoop和Hbase的重要组件。Zookeeper是Apache的一个java项目，属于Hadoop系统，扮演管理员的角色。它为分布式应用提供一致性服务的软件，提供的功能包括：配置维护、域名服务、分布式同步、组服务等。ZooKeeper提供一种集中式服务，用于维护配置信息，命名，提供分布式同步和提供组服务。所有这些类型的服务都以分布式应用程序的某种形式使用。
Zookeeper学习笔记
Morning Sunshine的IT技术博客
03-26 5055
1）Zookeeper是什么 zookeeper，它是一个分布式服务框架，是大数据中的重要组件，它是一个具有高吞吐量的分布式协调系统，它的主要作用是为分布式系统提供协调服务，如：统一命名服务、状态同步服务、集群管理、分布式应用配置项的管理等。 Dubbo官方推荐使用zookeeoer作为注册中心，注册中心负责服务地址的注册和查找，相当于目录服务。 什么是注册中心？举个简单的例子 ，就像字典目录 ，你要查个字， 找到目录， 然后找到对应的页， 然后字就找到了。 zk也是一个意思，把你要注册的服务给..
【Zookeeper】Windows下安装Zookeeper（图文记录详细步骤，手把手包安装成功）
tttzzzqqq2018的博客
08-03 2万+
Windows下安装Zookeeper（图文记录每一个步骤，手把手包安装成功）
zookeeper-3.4.6_zookeeper_
10-04
《Zookeeper：分布式服务治理的核心组件》 Zookeeper，作为Apache的一个开源项目，是分布式应用程序协调服务的基石，它是一个高可用、高性能的分布式一致性服务。在标题“zookeeper-3.4.6_zookeeper_”中，我们可以...
apache-zookeeper-3.8.4-bin.tar
04-10
Apache ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，它是集群的管理者，监视着分布式应用程序，提供了诸如配置维护、命名服务、分布式同步、组服务等这些分布式基础服务。Zookeeper是Apache Hadoop...
zookeeper连接工具
07-05
Zookeeper是一个分布式协调服务，由Apache Hadoop项目开发，广泛应用于大数据生态系统中，如HBase、Kafka等。它提供了一种可靠的方式来管理配置信息、命名服务、分布式同步以及组服务。Zookeeper连接工具则是为了...
在 Kali Linux 中安装 Impacket
最新发布
weixin_44023460的博客
09-30 233
在安装 Impacket 之前，你需要确保安装了 Python 和一些必要的依赖。通常，Kali 已经预装了 Python。步骤 3：克隆 Impacket 仓库。步骤 4：进入 Impacket 目录。如果你看到帮助信息，说明安装成功。步骤 5：安装 Impacket。
Linux 安装redis主从模式+哨兵模式3台节点
一千个读者就有一千个哈姆雷特
09-27 410
Linux 安装redis主从模式+哨兵模式3台节点
[Linux]：线程(一)
Bettysweetyaaa的博客
09-26 751
想深入了解线程吗？本文将为你详细解读线程的概念、优缺点、异常及用途，还介绍了 Linux 中线程的控制方法。快来阅读，提升你的编程技能，探索多线程的奥秘！
linux 源代码编译
Lxn2zh的博客
09-27 1355
有时候会在linux上下载源码包，然后进行编译成可执行的文件，这个过程需要经过configure、make、make install、make clean四个步骤。configure 为这个程序在当前的操作系统环境下选择合适的编译器和环境参数来编译该代码。make install 将已编译好的可执行文件安装到操作系统指定或默认的安装目录下。make 对程序代码进行编译操作，会将源码编译成可执行的目标文件。make clean 删除编译时临时产生的目录或文件。
Zookeeper基础操作指南
"这篇文档是关于在学习Spring框架过程中，如何使用和管理Zookeeper的一份命令集合。Zookeeper是一个分布式协调服务，常用于管理大型分布式系统。以下是一些基本的Zookeeper操作命令，包括安装、配置查看、状态检查...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值