Hbase物理存储原理

存储原理:

Hbase里的一个Table 在行的方向上分割为多个HRegion。
即HBase中一个表的数据会被划分成很多的HRegion,HRegion可以动态扩展并且HBase保证
HRegion的负载均衡。HRegion实际上是行键排序后的按规则分割的连续的存储空间。
在这里插入图片描述

拆分流程图:

Hregion是按大小分割的,每个表一开始只有一个Hregion,随着数据不断插入表,Hregion不
断增大,当增大到一个阀值的时候,Hregion就会等分两个新的Hregion。当table中的行不断
增多,就会有越来越多的Hregion。

在这里插入图片描述
一张Hbase表,可能有多个HRegion,每个HRegion达到一定大小(默认是10GB)时,进行分裂。
按照现在主流硬件的配置,每个HRegion的大小可以是1~20GB。这个大小由hbase.hregion.max.filesize指定,默认为10GB。HRegion的拆分和转移是由HBase(HMaster)自动完成的,用户感知不到。
Hregion是Hbase中分布式存储和负载均衡的最小单元
在这里插入图片描述
HRegion虽然是分布式存储的最小单元,但并不是存储的最小单元。
事实上,HRegion由一个或者多个HStore组成,每个Hstore保存一个columns family。
每个HStore又由一个memStore和0至多个StoreFile组成。如图:
在这里插入图片描述
StoreFile以HFile格式保存在HDFS上。
HRegion是分布式的存储最小单位,StoreFile(Hfile)是存储最小单位。

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值