storm定时任务使用实例

作者:剪刀手麦小孩 

来源:CSDN 

原文:https://blog.csdn.net/maixiaohai/article/details/51685581

版权声明:本文为博主原创文章,转载请附上博文链接!

--------------------- 

1.背景
需要在bolt中定时执行某些操作

2.方法
都是利用系统自带的定时tuple来完成,相当于系统自动发一个带有特殊标记的tuple,然后自己在bolt中判断,若为此特殊tuple,执行定时函数。
(1)如果所有bolt都需要定时,可在topology入口处通过config设置
(2)如果只有某一类bolt需要定时,可在该bolt内部override getComponetConfiguration方法设置

3.实现
(1)在topology入口处
conf.put(Config.TOPOLOGY_TICK_TUPLE_FREQ_SECS, 60);// 设置本Bolt定时发射数据
在各个bolt中使用下面代码判断是否是触发定时
tuple.getSourceComponent().equals(Constants.SYSTEM_COMPONENT_ID)

(2)bolt内部

@Override
public Map<String, Object> getComponentConfiguration() {
    // configure how often a tick tuple will be sent to ParseBolt
    Config conf = new Config();
    conf.put(Config.TOPOLOGY_TICK_TUPLE_FREQ_SECS, TOPOLOGY_TICK_TUPLE_FREQ_SECS);
    return conf;
}

执行函数内:

public void execute(Tuple tuple, BasicOutputCollector basicOutputCollector) {
    
    if (tuple.getSourceComponent().equals(Constants.SYSTEM_COMPONENT_ID) &&
            tuple.getSourceStreamId().equals(Constants.SYSTEM_TICK_STREAM_ID)) {
        //some things to do 
        return;
    }
}

4.注意事项
(1)一定注意区分自己的需求是第一种还是第二种
(2)接到定时tuple并处理后,记得执行return; 

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值