【hadoop生态之ZooKeeper】第一章Zookeeper概述【笔记+代码】

一、Zookeeper概述

1.1 概述

Zookeeper是一个开源的分布式的,为分布式应用提供协调服务的Apache项目。Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件,提供的功能包括:配置维护、域名服务、分布式同步、组服务等。

1.2 特点

1)Zookeeper:一个领导者(leader),多个跟随者(follower)组成的集群。

2)Leader负责进行投票的发起和决议,更新系统状态。

3)Follower用于接收客户请求并向客户端返回结果,在选举Leader过程中参与投票。

4)集群中奇数台服务器只要有半数以上节点存活,Zookeeper集群就能正常服务。

5)全局数据一致:每个server保存一份相同的数据副本,client无论连接到哪个server,数据都是一致的。

6)更新请求顺序进行,来自同一个client的更新请求按其发送顺序依次执行。

7)数据更新原子性,一次数据更新要么成功,要么失败。

8)实时性,在一定时间范围内,client能读到最新数据。

1.3 数据结构

ZooKeeper数据模型的结构与Unix文件系统很类似,整体上可以看作是一棵树,每个节点称做一个ZNode。每一个ZNode默认能够存储1MB的元数据,每个ZNode都可以通过其路径唯一标识。

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-CD0i4H8W-1607585461142)(file:///C:/Users/18451/AppData/Local/Temp/msohtmlclip1/01/clip_image004.jpg)]

数据结构图

1.4 应用场景

提供的服务包括:统一命名服务、统一配置管理、统一集群管理、服务器节点动态上下线、软负载均衡等。

1.4.1 统一命名服务

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-CD0i4H8W-1607585461142)(file:///C:/Users/18451/AppData/Local/Temp/msohtmlclip1/01/clip_image004.jpg)]

1.4.2 统一配置管理

1、分布式环境下,配置文件管理和同步是一个常见问题

(1) 一个集群中,所有节点的配置信息是一致的,比如hadoop集群

(2) 对配置文件修改后,希望能够快速同步到各个节点上

2、配置管理可交由ZK实现

(1)可配置信息写入ZK上的一个Znode

(2)各个节点监听这个ZNode

(3)一旦Znode中的数据被修改,ZK将通知各个节点

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-rq9yCMsB-1607585461143)(file:///C:/Users/18451/AppData/Local/Temp/msohtmlclip1/01/clip_image006.png)]

1.4.3 统一集群管理

集群管理结构图如下所示。

1、 分布式环境中,实时掌握每个节点的状态是必要的。

(1) 可根据节点实时做出一些调整

2、 可交由Zk实现

(1) 可将节点信息写入ZK上的一个ZNode

(2) 监听这个Znode可获取它的实时状态变化

3、 典型应用

(1) HBase中Master状态监控与选举

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-zsyU3cPq-1607585461146)(file:///C:/Users/18451/AppData/Local/Temp/msohtmlclip1/01/clip_image008.png)]

1.4.4 服务器节点动态上下线

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-ZRoDbUu9-1607585461149)(file:///C:/Users/18451/AppData/Local/Temp/msohtmlclip1/01/clip_image010.jpg)]

1.4.5 软负载均衡

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-TM1rDL1q-1607585461150)(file:///C:/Users/18451/AppData/Local/Temp/msohtmlclip1/01/clip_image012.jpg)]

1.5 下载地址

1)官网首页:

https://zookeeper.apache.org/

2)下载截图

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-Fc35NNdS-1607585461151)(file:///C:/Users/18451/AppData/Local/Temp/msohtmlclip1/01/clip_image014.jpg)]

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-CABqTrSf-1607585461153)(file:///C:/Users/18451/AppData/Local/Temp/msohtmlclip1/01/clip_image016.jpg)]

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-RY2akc9M-1607585461154)(file:///C:/Users/18451/AppData/Local/Temp/msohtmlclip1/01/clip_image018.jpg)]

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值