![](https://img-blog.csdnimg.cn/20201014180756918.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
流计算
文章平均质量分 74
kobexzf
这个作者很懒,什么都没留下…
展开
-
flink-概述
operator并行度相同+forward可合并,此时Task是一个operator chain,含main operator 时间/计数 滚动/滑动 注意滚动不重叠,滑动需指定滑动步长 会话窗口(一段时间无数据进入结束窗口) Event/Ingestion/Window Processing Time,多用event time watermark: 当event time=x的事件到达,认为event time=x-watermark的事件都到达了,注意不一定是event time operator原创 2021-10-12 17:37:54 · 185 阅读 · 0 评论 -
storm
nimbus (zk互相感知,一对多) supervisor (一对多) worker process(一对多) executor(thread) (一对多) 同一(spout或bolt)的多个task 启动nimbus和supervisor,写程序提交topology到nimbus,worker process由supervisor启停 parallelism_hint 指定此(spout或bolt)的executor数,默认1 executor 1 task,setNumTasks设定此(spout或b原创 2020-07-23 17:21:55 · 77 阅读 · 0 评论