hbase过滤查询的两种方式

如果你在Hbase表中存在一些特征相同的记录，实际上就可以通过设置Filter的方式进行检索过滤。

比如这个特征是前缀相同。

ROW                                         COLUMN+CELL                                                                                 003_8618722111005_460014004369494                                   column=info:sex, timestamp=1318853623294, value=male                    
  Jerry1                                       column=info:sex, timestamp=1318917602868, value=male                003_8618722111005_460014004569494                             column=info:sex, timestamp=1318917789851, value=male

可以发现这三条记录都是以Jerry开头的row key.

那么我们如何检索呢。很简单。

如果是在hbase shell中

scan ‘scores’, {FILTER => org.apache.Hadoop.hbase.filter.PrefixFilter.new(org.apache.hadoop.hbase.util.Bytes.toBytes(‘003_8618722111005_’))}

或者

scan 'MsisdnImsi',{STARTROW=>"003_8618722111005_460014004369494",STOPROW=>"003_8618722111005_9"}

如果是Java 客户端

 

[java] view plain copy

1. <pre name="code" class="java">public void scaneByPrefixFilter(String tablename, String rowPrifix) {  
2.    try {  
3.        HTable table = new HTable(conf, tablename);  
4.        Scan s = new Scan();  
5.        s.setFilter(new PrefixFilter(rowPrifix.getBytes()));  
6.        ResultScanner rs = table.getScanner(s);  
7.        for (Result r : rs) {  
8.           KeyValue[] kv = r.raw();  
9.           for (int i = 0; i < kv.length; i++) {  
10.               System.out.print(new String(kv[i].getRow()) + "  ");  
11.               System.out.print(new String(kv[i].getFamily()) + ":");  
12.               System.out.print(new String(kv[i].getQualifier()) + "  ");  
13.               System.out.print(kv[i].getTimestamp() + "  ");  
14.               System.out.println(new String(kv[i].getValue()));  
15.           }  
16.       }  
17.    } catch (IOException e) {  
18.          e.printStackTrace();  
19.    }  
20. }  

 

[java] view plain copy

1. 或者：  

[java] view plain copy

1. <pre name="code" class="java">public static void getInfo(String str) {    
2. /根据分区规则 取模     
3.        long mod = Long.valueOf(str) % DataType.getAsInt(6);  
4.        String tmp = "";  
5.        if (mod > 9)  
6.        {  
7.            tmp = "0" + mod;  
8.        }  
9.        else  
10.        {  
11.            tmp = "00" + mod;  
12.        }  
13. //参考scan 'MsisdnImsi',{STARTROW=>"003_8618722111005_460014004369494",STOPROW=>"003_8618722111005_9"}</span>  
14.          String startRow = tmp + "_" + str;  
15.        String stopRow = tmp + "_" + str + "_9";  
16.          
17.        logger.info("----------------------   startRow : "+startRow+" ---------------------");  
18.        logger.info("----------------------   stopRow : "+stopRow+" ---------------------");  
19.          
20.        ResultScanner scanner = null;  
21.        try  
22.        {  
23.            // 从表池中取出HBASE表对象  
24.            HTableInterface table = getTable("testtable");  
25.            byte[] family   = Bytes.toBytes("F");  
26.            byte[] column   = Bytes.toBytes("A");  
27.            // 获取筛选对象  
28.             Scan scan = new Scan();  
29.             scan.setStartRow(getBytes(startRow));  
30.             scan.setStopRow(getBytes(stopRow));  
31.            scan.addColumn(family, column);  
32.            // 给筛选对象放入过滤器(true标识分页,具体方法在下面)  
33.            scan.setCacheBlocks(false);  
34.            scanner = table.getScanner(scan);  
35.            // 遍历扫描器对象， 并将需要查询出来的数据row key取出  
36.            for (Result result : scanner) {  
37.                for (KeyValue kv : result.list()) {  
38.                    String key = Bytes.toStringBinary(kv.getRow());  
39.                    String value = HbaseVO.deserialize(kv.getValue()).insertTime;  
40.   //do something  
41.                }  
42.            }  
43.        }  
44.        catch (Exception e)  
45.        {  
46.            e.printStackTrace();  
47.            logger.error("查询hbase异常！ ",e);  
48.        }  
49.        finally  
50.        {  
51.            closeScanner(scanner);  
52.        }  
53.    }  

转载于:https://my.oschina.net/sniperLi/blog/835398