HBase-协处理器(Coprocessor)

1.协处理器概念
  协处理器允许用户在RegionServer上运行自己的逻辑代码,
  数据的处理流程在服务器上完成,只返回一个很小的结果集,
  类似一个小的MapReduce框架。
2.协处理器优先级:系统级和用户级
  同时序号越小,优先级越高。

3.协处理器开始和结束
在这里插入图片描述
中间保持的是 CoprocessorEnvironment
在这里插入图片描述

4.如何加载协处理器
hbase-site.xml中的协处理器都是系统级的,按顺序执行
在这里插入图片描述

另一个是用HtableDescriptor.setValue()加载:
在这里插入图片描述

协处理器实现例子:

在这里插入图片描述

5.协处理器类型

1.RegionObserver类 属于Observer协处理器

作用:用来处理Region生命周期事件
Region状态:(pre方法在事件前调用,post在事件后调用)
	1.pending open:region将要被打开时。
	  使用的协处理器方法:void preOpen(...)/void postOpen(...)
	  将在region打开前被调用
	2.经过pending open,但还没到open,Server可能需从WAL中应用一些记录到region中:
	  方法:void preWALRestore(...)/void postWALRestore(...)
	  让用户细粒度的控制WAL重做时那些修改需被实施
	3.open(一个region被部署到一个RegionServer中,并正常工作,可拆分):
	  方法:void preFlush(...)/void postFlush(...)
	       void preCompact(...)/void postCompact(...)
	       void preSplit(...)/void postSplit(...)
	4.pending close(region open和close之间):
	  方法:void preClose(...,boolean abortRequested)
	       /void postClose(...,boolean abortRequested)
	   abortRequested包含region被刮泥的原因
	  

在这里插入图片描述

作用:处理客户端API事件:
在HTable的方法前后欧调用:

在这里插入图片描述

2.Master Observer类
为了处理master服务器的所有回调函数
在这里插入图片描述
在这里插入图片描述

该协处理器使用例子:

在这里插入图片描述

6.EndPoint

作用:用于解决协处理器只能在行键决定的region所在的那个单个服务器上执行,
     不会送到所有服务器上。
     因此需要EndPoint来先所有RegionServer发送请求,
     这样各个服务器就能在各个服务器上执行计算,最后将计算结果手机到客户端。
     这样比全部数据手机到客户端再计算快很多。

EndPoint使用例子:
在这里插入图片描述
在这里插入图片描述
注意:配置:
在这里插入图片描述

另一个例子:
在这里插入图片描述
在这里插入图片描述

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值