一步一步学Hadoop(之ZooKeper)

1.Zookeeper基本概念

1.1Zookeeper是什么?

        ZooKeeper 顾名思义 动物园管理员,他是拿来管大象(Hadoop) 、 蜜蜂(Hive) 、 小猪(Pig)  的管理员, Apache Hbase和 Apache Solr 以及LinkedIn sensei  等项目中都采用到了 Zookeeper。

     Zookeeper 是 Google 的 Chubby一个开源的实现,是 Hadoop 的分布式协调服务,ZooKeeper是以Fast Paxos算法为基础,它包含一个简单的原语集,分布式应用程序可以基于它实现同步服务,配置维护和命名服务等。


1.2Zookeeper能帮我们做什么?

⑴大部分分布式应用需要一个主控、协调器或控制器来管理物理分布的子进程(如资源、任务分配等)

⑵目前,大部分应用需要开发私有的协调程序,缺乏一个通用的机制

⑶协调程序的反复编写浪费,且难以形成通用、伸缩性好的协调器

⑷ZooKeeper:提供通用的分布式锁服务,用以协调分布式应用

1.3Zookeeper能帮我们做什么?

⑴Hadoop2.0,使用Zookeeper的事件处理确保整个集群只有一个活跃的NameNode,存储配置信息等.

⑵HBase,使用Zookeeper的事件处理确保整个集群只有一个HMaster,察觉HRegionServer联机和宕机,存储访问控制列表等.


  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值