Hbase 架构各个角色的功能以及使用场景

Hbase 架构各个角色的功能

一、Client

     Client包含了访问Hbase的接口,另外Client还维护了对应的cache来加速Hbase的访问,比如cache的.META元数据的信息。

二、Zookeeper

      Hbase通过Zookeeper来做master的高可用、RegionServer的监控、元数据的入口以及集群配置的维护等工作。具体工作如下:

       1.通过Zookeeper来保证集群中只有1个master在运行,如果master异常,会通过竞争机制产生新的master提供服务。

       2.通过Zookeeper来监控RegionServer的状态,当RegionServer有异常的时候,通过回调的形式通知Master RegionServer 上下线的信息

       3.通过Zookeeper存储元数据的统一入口地址

三、Hmaster

        master节点的主要指责如下:

                1.为RegionServer分配Region

                2.维护整个集群的负载均衡

                3.维护集群的元数据信息

                4.发现实效的Region,并将实效的Region分配到正常的RegionServer

                5.当RegionServer实效的时候,协调对应的Hlog的拆分

四、HregionServer

        HregionServer直接对用户的读写请求,是真正的“干活”节点,功能概况:

                1.管理master为其分配的Region

                2.处理来自客户端的读写请求

                3.负责和低层HDFS的交互,存储数据到HDFS

                4.负责Region变大以后的拆分

                5.负责Storefile的合并工作

五、HDFS

        HDFS为Hbase提供最终的底层数据存储服务,同时为Hbase提供高可用(Hlog存储在HDFS)的支持,功能概况如下:

                1.提供元数据和表数据的底层分布式存储服务

                2.数据多副本,保证的高可靠和高可用性

Hbase的使用场景

                1.是巨量大(百T、PB级别)

                2.查询简单(基于rowkey或者rowkey范围查询)

                3.不涉及到复杂的关联

                4.海量订单流水数据(长久保存)

                5.交易记录

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值