hbase RowFilter如何根据rowkey查询以及实例实现代码

1. RowFilter用于过滤row key

   Operator	Description
   LESS	小于
   LESS_OR_EQUAL	小于等于
   [EQUAL	等于
   NOT_EQUAL	不等于
   GREATER_OR_EQUAL	大于等于
   GREATER	大于
   NO_OP	排除所有

   
   

   Comparator	Description
   BinaryComparator	使用Bytes.compareTo()比较
   BinaryPrefixComparator	和BinaryComparator差不多，从前面开始比较
   NullComparator	Does not compare against an actual value but whether a given one is null, or not  null.
   BitComparator	Performs a bitwise comparison, providing a BitwiseOp class with OR, and XOR operators.
   RegexStringComparator	正则表达式
   SubstringComparator	把数据当成字符串，用contains()来判断

   
   
2. 
   
3. 
   
4. 
   
5. 
   
6. import java.io.IOException;
   
7. 
   
8. import org.apache.hadoop.conf.Configuration;
   
9. import org.apache.hadoop.hbase.HBaseConfiguration;
   
10. import org.apache.hadoop.hbase.HColumnDescriptor;
    
11. import org.apache.hadoop.hbase.HTableDescriptor;
    
12. import org.apache.hadoop.hbase.client.HBaseAdmin;
    
13. import org.apache.hadoop.hbase.client.HTable;
    
14. import org.apache.hadoop.hbase.client.Put;
    
15. import org.apache.hadoop.hbase.client.Result;
    
16. import org.apache.hadoop.hbase.client.ResultScanner;
    
17. import org.apache.hadoop.hbase.client.Scan;
    
18. import org.apache.hadoop.hbase.filter.BinaryComparator;
    
19. import org.apache.hadoop.hbase.filter.BinaryPrefixComparator;
    
20. import org.apache.hadoop.hbase.filter.CompareFilter;
    
21. import org.apache.hadoop.hbase.filter.Filter;
    
22. import org.apache.hadoop.hbase.filter.RegexStringComparator;
    
23. import org.apache.hadoop.hbase.filter.RowFilter;
    
24. import org.apache.hadoop.hbase.filter.SubstringComparator;
    
25. 
    
26. public class TestHbaseRowFilter {
    
27.         String tableName = "test_row_filter";
    
28.         Configuration config = HBaseConfiguration.create();
    
29. 
    
30.         /**
    
31.          * 部分代码来自hbase权威指南
    
32.          * @throws IOException
    
33.          */
    
34.         public void testRowFilter() throws IOException {
    
35. 
    
36.                 HTable table = new HTable(config, tableName);
    
37.                 Scan scan = new Scan();
    
38. 
    
39.                 System.out.println("小于等于row010的行");
    
40.                 Filter filter1 = new RowFilter(CompareFilter.CompareOp.LESS_OR_EQUAL,
    
41.                                 new BinaryComparator("row010".getBytes()));
    
42.                 scan.setFilter(filter1);
    
43.                 ResultScanner scanner1 = table.getScanner(scan);
    
44.                 for (Result res : scanner1) {
    
45.                         System.out.println(res);
    
46.                 }
    
47.                 scanner1.close();
    
48. 
    
49.                 System.out.println("正则获取结尾为5的行");
    
50.                 Filter filter2 = new RowFilter(CompareFilter.CompareOp.EQUAL,
    
51.                                 new RegexStringComparator(".*5[        DISCUZ_CODE_0        ]quot;));
    
52.                 scan.setFilter(filter2);
    
53.                 ResultScanner scanner2 = table.getScanner(scan);
    
54.                 for (Result res : scanner2) {
    
55.                         System.out.println(res);
    
56.                 }
    
57.                 scanner2.close();
    
58. 
    
59.                 System.out.println("包含有5的行");
    
60.                 Filter filter3 = new RowFilter(CompareFilter.CompareOp.EQUAL,
    
61.                                 new SubstringComparator("5"));
    
62.                 scan.setFilter(filter3);
    
63.                 ResultScanner scanner3 = table.getScanner(scan);
    
64.                 for (Result res : scanner3) {
    
65.                         System.out.println(res);
    
66.                 }
    
67.                 scanner3.close();
    
68. 
    
69.                 System.out.println("开头是row01的");
    
70.                 Filter filter4 = new RowFilter(CompareFilter.CompareOp.EQUAL,
    
71.                                 new BinaryPrefixComparator("row01".getBytes()));
    
72.                 scan.setFilter(filter4);
    
73.                 ResultScanner scanner4 = table.getScanner(scan);
    
74.                 for (Result res : scanner4) {
    
75.                         System.out.println(res);
    
76.                 }
    
77.                 scanner3.close();
    
78.         }
    
79. 
    
80.         /**
    
81.          * 初始化数据
    
82.          */
    
83.         public void init() {
    
84.                 // 创建表和初始化数据
    
85.                 try {
    
86.                         HBaseAdmin admin = new HBaseAdmin(config);
    
87.                         if (!admin.tableExists(tableName)) {
    
88.                                 HTableDescriptor htd = new HTableDescriptor(tableName);
    
89.                                 HColumnDescriptor hcd1 = new HColumnDescriptor("data");
    
90.                                 htd.addFamily(hcd1);
    
91.                                 HColumnDescriptor hcd2 = new HColumnDescriptor("url");
    
92.                                 htd.addFamily(hcd2);
    
93. 
    
94.                                 admin.createTable(htd);
    
95.                         }
    
96. 
    
97.                         HTable table = new HTable(config, tableName);
    
98. 
    
99.                         table.setAutoFlush(false);
    
100.                         int count = 50;
     
101.                         for (int i = 1; i <= count; ++i) {
     
102.                                 Put p = new Put(String.format("row%03d", i).getBytes());
     
103.                                 p.add("data".getBytes(), String.format("col%01d", i % 10)
     
104.                                                 .getBytes(), String.format("data%03d", i).getBytes());
     
105.                                 p.add("url".getBytes(), String.format("col%01d", i % 10)
     
106.                                                 .getBytes(), String.format("url%03d", i).getBytes());
     
107.                                 table.put(p);
     
108.                         }
     
109.                         table.close();
     
110. 
     
111.                 } catch (IOException e) {
     
112.                         e.printStackTrace();
     
113.                 }
     
114.         }
     
115. 
     
116.         /**
     
117.          * @param args
     
118.          * @throws IOException
     
119.          */
     
120.         public static void main(String[] args) throws IOException {
     
121.                 TestHbaseRowFilter test = new TestHbaseRowFilter();
     
122.                 test.init();
     
123.                 test.testRowFilter();
     
124.         }
     
125. 
     
126. }