storm集群的工作流程


1,客户端向nimbus提交任务请求;

2,nimbus接收到客户端的任务获取supervisor的空闲worker,开始分配任务;

3,supervisor集群通过监听zookeeper,获取到nimbus所分配的任务,开始启动worker;

4,supervisor集群中的worker中的spout开始获取要处理的数据,将数据分发给bolt1,各个集群中的bolt1开始对数据进行切割,互不干扰;

5,各个集群上的bolt1对数据进行切割完毕后,开始将数据分发给各个集群上的bolt2进行处理(统计);

6,bolt2将数据处理完后输出到数据库进行保存。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值