大数据技术之HBase之读数据流程和写数据流程

一、读数据流程

        Client首先访问Zookeeper集群,在Zookeeper的meta表找到HMaster所在的服务器,接着Zookeeper把HMaster所在的HRegionServer的信息响应给Client,Client给HMaster发送查找根据命名空间、表名和行键确定的Region所在的HRegionServer的请求,HMaster把行键所在的HRegionServer的信息返回给Client,Client向行键所在的HRegionServer发起读请求,首先从MemStore读数据,如果没有,接着去BlockCache读数据,如果还没有,最后去StoreFile读数据(StoreFile是以HFile的形式存储在HDFS上),如果要从StoreFile里面读数据,不是直接把读的结果返回给Client,而是先写入BlockCache,再返回给Client。

二、写数据流程

        Client往Zoopkeeper集群发送寻找HMaster所在的HRegionServer的请求,Zookeeper响应Client,返回HBase的元数据所在的HRegionServer,Client向HMaster发送写请求,HMaster给Client分配Region,Client向分配的Region所在的RegionServer发送写入数据的请求,这里要先写入HRegionServer的HLog,再将数据写入MemStore,这是为了防止内存存储的数据丢失,可以从Write-Ahead logfile日志文件恢复数据,最后HRegionServer响应反馈给Client写入数据成功。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值