hbase实现分页查询

最新推荐文章于 2022-01-18 13:14:51 发布

kwu_ganymede

最新推荐文章于 2022-01-18 13:14:51 发布

阅读量2.7k

点赞数 1

分类专栏： Hbase 文章标签：分页 hbase

本文链接：https://blog.csdn.net/kwu_ganymede/article/details/49097415

版权

本文介绍了如何在HBase中实现分页查询，主要通过设计时间倒序的rowkey来保证查询效率。内容包括rowkey设计、数据插入操作以及利用scan进行时间倒序查询的方法。

摘要由CSDN通过智能技术生成

hbase实现分页查询，实现按时间查询最新的15条，hbase的查询主要是通过rowkey来进行的，保证查询的高效。column的filter查询效率较低。

1、rowkey的设计

以时间的倒序进行查询，如20150818_152130来看，设计rowkey

20150818的hash64值+(999999-152130)。

1）MurmurHash的64的冲突非常小，并实现rowkey的散列。

2）日分秒与999999的差值，可以实现逆序

2、插入数据的操作

[java]view plaincopy 
   
 String[] splited = jsData.split("`");  
   
 SimpleDateFormat sdf = new SimpleDateFormat("yyyyMMddHHmmss");  
 Date date = new Date();  
 String format = sdf.format(date);  
   
 String dateday = format.substring(0, 8);  
 String datehour = format.substring(8, 10);  
 String dateMin = format.substring(10, 12);  
 String dateSec = format.substring(12, 14);  
   
 int datehourSub = 99 - new Integer(datehour);  
 int dateMinSub = 99 - new Integer(dateMin);  
 int dateSecSub = 99 - 