KeyOnlyFilter使用方法及实例

最新推荐文章于 2022-11-09 14:42:29 发布

刘啸尘-勤奋的小小尘

最新推荐文章于 2022-11-09 14:42:29 发布

阅读量5.7k

点赞数

分类专栏： HBase实际使用文章标签： filter each api

本文链接：https://blog.csdn.net/liuxiaochen123/article/details/7885648

版权

HBase实际使用专栏收录该内容

4 篇文章 0 订阅

订阅专栏

KeyOnlyFilter

官方API解释如下：

A filter that will only return the key component of each KV (the value will be rewritten as empty).

This filter can be used to grab all of the keys without having to also grab the values.

此filter可以用来计数，但是效率没有FirstKeyOnlyFilter高

如果需要用FirstKeyOnlyFilter 可以参考我这篇关于FirstKeyOnlyFilter的文章，地址如下

http://blog.csdn.net/liuxiaochen123/article/details/7878580

KeyOnlyFilter实例代码如下，比较简单，意思到就行

public int getCount1() {
		long bef = System.currentTimeMillis();
		int i = 0;
		ResultScanner rs = null;
		try {
			Scan s = new Scan();
			s.setCaching(500);
			s.setCacheBlocks(false);
			s.setFilter(new KeyOnlyFilter());
			rs = tableKeyword.getScanner(s);
		} catch (IOException e) {
			log.warn(e);
			e.printStackTrace();
		}
		for (org.apache.hadoop.hbase.client.Result r : rs) {
			i++ ;
		}
		long now = System.currentTimeMillis();
		log.warn("keyword表中数据总数 ：" + i + ", 所用时间 ： " + (now - bef)/1000.0);
		rs.close();
		return i;
	}

最好设置tableKeyword.setScannerCaching(500);

s.setCaching(500);
s.setCacheBlocks(false);这三个参数，否则速度会降下来很多

总的来说，可以节省很多时间