Hbase-RowKey Filter详解

最新推荐文章于 2024-01-23 16:36:48 发布
最新推荐文章于 2024-01-23 16:36:48 发布
阅读量2.7k 收藏 3
点赞数 1
分类专栏： 大数据 hbase
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u011066470/article/details/98089543
版权

RowFilter是用来对rowkey进行过滤的,比较符如下:

相关的过滤方法使用:
提取rowkey以01结尾数据
Filter filter = new RowFilter(CompareFilter.CompareOp.EQUAL,new RegexStringComparator(".*01$"));
提取rowkey以包含201407的数据
Filter filter = new RowFilter(CompareFilter.CompareOp.EQUAL,new SubstringComparator("201407"));
提取rowkey以123开头的数据
Filter filter = new RowFilter(CompareFilter.CompareOp.EQUAL,new BinaryPrefixComparator("123".getBytes()));

个人感觉：RegexStringComparator的正则比较器只适用的关系符为equals，其他符号less，lessor equal，greater，greaterorequal不启作用

健康平安的活着
关注
专栏目录
HBase过滤器
weixin_58078092的博客
10-20 945
HBase过滤器 文章目录HBase过滤器作用比较过滤器比较运算符常见的六大比较过滤器BinaryComparator（二进制比较器）BinaryPrefixComparator（二进制前缀比较器）NullComparator（空比较器）一般不用BitComparator（位比较器）一般不用RegexStringComparator（正则比较器）SubstringComparator示例代码rowKey过滤器：RowFilter列簇过滤器：FamilyFilter列过滤器：QualifierFilter列值
HBase详解（对hbase集群搭建、读写流程、hbase的javaApi等细致入微的讲解与保姆级的图解）
wudidahuanggua的博客
09-24 3492
细致入微的图文讲解，看了这篇文章你很难学不懂hbase
HBASE Rowkey filter
06-28 260
HBASE通过Rowkey可以直接定位行，速度很快，在filter中，有2个API可以过滤主键： 1.RowFilter 行过滤器， 依靠行键来过滤 Scan scan = new Scan(); ...
hbase RowFilter如何根据rowkey查询以及实例实现代码
linqing0201的博客
12-29 894
RowFilter用于过滤row key Operator Description LESS 小于 LESS_OR_EQUAL 小于等于 [EQUAL 等于 NOT_EQUAL 不等于 GREATER_OR_EQUAL 大于等于 GREATER 大于
hbase filter及rowkey范围检索使用并对结果集处理
Inkbamboo专栏
11-16 7862
hbase新API操作hbase过滤器之后对结果集进行处理生成spark临时表用于后续处理。 注意hbase中，表中存储的数据类型必须一一对应，否则会因为解码问题，导致最后结果非常的混乱 代码如下：    （如有大神看到，请不吝赐教，交流邮箱1970497138@qq.com） /** * 根据rowkey进行数据筛选 * 测试：使用scan的setStart
hbase行键过滤器RowFilter
努力奔跑的蜗牛
12-03 308
转载地址 https://my.oschina.net/u/3346994/blog/1923976 行过滤器视频链接 RowFilter是用来对rowkey进行过滤的,比较符如下: Operator Description LESS 小于 LESS_OR_EQUAL 小于等于 EQUAL 等于 NOT_EQUAL 不等于 GREATER_OR_EQUAL 大于等于...
HBase 系列（七）——HBase过滤器详解
黑白影的博客
06-07 9159
一、HBase过滤器简介 Hbase提供了种类丰富的过滤器（filter）来提高数据处理的效率，用户可以通过内置或自定义的过滤器来对数据进行过滤，所有的过滤器都在服务端生效，即谓词下推（predicate push down）。这样可以保证过滤掉的数据不会被传送到客户端，从而减轻网络传输和客户端处理的压力。 二、过滤器基础 2.1 Filter接口和FilterBase抽象类 Filter...
Hbase入门教程,shell命令大全详解！
zp17834994071的博客
07-03 1898
Hbase的基本语法 Hbase是一个面向列的非关系型数据库，采取Column Family（常译为列族/列簇）来对数据进行分类。 一个列族包含多个列，一个列族的多个列之间通常也具有某种关系，比如相似或同种类别。所以列族可以看作是某种分类（归类）。 每个类别里都会有具体的信息，它们就相当于一个个标识符（变量名），在Hbase中叫做Column Qualifier（列修饰符），列修饰符位于列族里面用来标识一条条数据。 在Hbase中一个列族（Column Family）和一个列修饰符（Column Quali
HBase Scan命令详解
热门推荐
zy353003874的博客
09-16 1万+
hbase中scan命令是我们经常使用到的，而filter的作用尤其强大。这里简要的介绍下scan下filter命令的使用. 插入scan命令需要的数据 这里模拟了部分微博评论的数据,然后使用代码插入数据到hbase,代码就不列出来了比较简单。 public class Comment { //1-->普通文章，2--->热点文章 Integer articleType; //文章id String articleId; String userId;
HBase基本数据操作详解
一个北漂的程序猿
01-15 617
文章目录概述使用命名空间Namespace命名空间管理预定义的命名空间创建表删除表修改表新增、更新数据Put常用构造函数常用方法实例代码删除数据Delete构造函数常用方法实例代码获取单行Get构造函数常用方法实测代码获取多行Scan常用构造函数常用方法实测代码 概述 对于建表，和RDBMS类似，HBase也有namespace的概念，可以指定表空间创建表，也可以直接创建表，进入default表空...
HBase--RowFilter和BloomFilter原理
weixin_59295776的博客
09-05 228
RowFilter顾名思义就是对rowkey进行过滤，那么rowkey的过滤无非就是相等（EQUAL）、大于(GREATER)、小于(LESS)，大于等于(GREATER_OR_EQUAL)，小于等于(LESS_OR_EQUAL)和不等于(NOT_EQUAL)几种过滤方式。· 存储开销：BloomFilter是列族级别的配置，一旦表格中开启BloomFilter，那么在生成StoreFile时同时会生成一份包含BloomFilter结构的文件MetaBlock，所以会增加一定的存储开销和内存开销。
hbase shell行键过滤正则匹配
最新发布
qq_36382892的博客
01-23 1202
在实际运维生产环境的过程中，经常遇到需要过滤rowkey包含部分字符的场景。以下列出可行的几种操作方式。
Hbase笔记 —— 过滤器
一纸春秋的博客
12-03 1308
Hbase 过滤器，介绍了多种比较运算符，多种比较器之间的含义与区别。并且对几种常用的过滤器给出了实例代码，与代码分析
Hbase中的filter使用
生存，生活，差之毫厘谬以千里也
07-11 412
https://blog.csdn.net/lr131425/article/details/72676254
【图文详细 】HBase——过滤器查询
谦卑t
12-07 253
1、比较过滤器 2、专用过滤器  
HBase通过Java利用过滤器简单查询数据
weixin_47878012的博客
12-04 785
通过RowFilter过滤rowKey 比0003小的所有值 @Test /* * 使用RowFilter过滤器查询*/ public void rowFileter()throws IOException { Scan scan = new Scan(); //查询所有rowkey比0003小的数据 /* * 使用rowFileter查询比0003小的所有数据 * rowkey过滤器*/
Hbase的Filter详解使用
Flyer的后花园
11-20 3363
转载: https://blog.csdn.net/lr131425/article/details/72676254 参数基础 有两个参数类在各类Filter中经常出现，统一介绍下： （1）比较运算符 CompareFilter.CompareOp 比较运算符用于定义比较关系，可以有以下几类值供选择： EQUAL                                  相等 GREA...
Hbase的后缀过滤查询
大数据挖掘SparkExpert的博客
07-18 9041
HBase原生自带了对RowKey的很多种查询策略。通过这个过滤器可以在HBase中的数据的多个维度（行，列，数据版本）上进行对数据的筛选操作，也就是说过滤器最终能够筛选的数据能够细化到具体的一个存储单元格上（由行键，列明，时间戳定位）。 其API中提供的Filter大致如下： CompareFilter 是高层的抽象类，下面我们将看到他的实现类和实现类代表的各种过滤条件
pandas入门与进阶（三）
sGDUTBMW的博客
11-13 263
文章目录0. 常用方法和技巧1. 0. 常用方法和技巧 # 将数据随机打散 from sklearn.utils import shuffle df_shuffle = shuffle(df) # 字符串方法str只能用于Series，只能在字符串列上使用，不能数字列上使用 # 替换掉温度的后缀℃ df.loc[:, "bWendu"] = df["bWendu"].str.replace("℃", "").astype('int32') # 查看温度类型的计数 df["wendu_type"].val
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值