Apache Nifi

本文介绍了Apache Nifi中的一些关键处理器,如ControlRate用于限制数据流速率,DetectDuplicate用于检测和去除重复FlowFile,MonitorActivity则能在无数据流动时发送告警,RouteOnAttribute根据FlowFile属性进行路由,ScanAttribute和ScanContent对属性和内容进行匹配,RouteOnContent基于FlowFile内容做路由,而ValidateXml则对XML内容进行验证。
摘要由CSDN通过智能技术生成
2.3.2 数据路由类和调制处理器单元
ControlRate

ControlRate处理器单元用来控制数据流部分流量的速率。


上面的图中的例子表示1分钟内只允许最多1000个FlowFile流过。
DetectDuplicate

DetectDuplicate处理器单元用来依据用户定义的特征来监控和发现重复的FlowFile。通常这个处理器会搭配HashContent单元处理器来完成功能。


上面的图中的例子表示Processor根据输入的FlowFile的hash.value属性值作为去重条件对FlowFile进行匹配,将去重后的映射到non-duplicate的Relationship中,将重复的FlowFile映射到duplicate的Relationship中。
MonitorActivity

MonitorActivity处理器单元可以在用户定义的时段内如果没有数据流量就是发送告警通知,也可以选择附加功能,在数据流量恢复之后发送恢复通知。


上面的图中例子标示Processor每1分钟内没有FlowFile输入就会不间断的发出Inactivity Message属性的内容,且检测范围是本Node节点。
RouteOnAttribute

Ro

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值