Hbase 查询为什么快

Hbase查询速度快主要得益于数据分区存储和高效的数据格式。数据按rowkey定位到特定region,利用location cache提高访问效率,并可通过独立meta server避免meta表查询瓶颈。HFile V2的分块和索引结构,结合Bloomfilter与多种过滤器,减少查找次数并优化随机读取性能。
摘要由CSDN通过智能技术生成

第一、数据分区存储(region)

  通过rowkey可以快速地位到在那个region上,位置信息保存在hbase的meta表里。

 每次查询都会有location cache的,所以htable里面的Hconnection 初始化的时候访问速度相对来说稍慢,客户端缓存截图如下。

 随着数据越来越大,meta表的查询有可能遇到瓶颈,建议单独独立出成一个meta server。

(备注:一个meta表的一条记录大概为1k)。

 

第二、hbase的数据格式 HFile V2 (HFile V1代码已经出hbase版本删除了)




评论 4
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值