云计算
文章平均质量分 72
杭电陈冠希
这个作者很懒,什么都没留下…
展开
-
storm--拓扑
数据流组 设计一个拓扑时,你要做的最重要的事情之一就是定义如何在各组件之间交换数据(数据流是如何被bolts消费的)。一个数据流组指定了每个bolt会消费哪些数据流,以及如何消费它们。 数据流组在定义拓扑时设置,就如 builder.setBolt("当前groupID", 处理该流的Bolt实例, [int 并行数]) .shuffleGrouping("指定接收的groupID"); TopologyBuilder对象通过<font color="原创 2021-07-23 15:23:57 · 248 阅读 · 0 评论 -
storm入门
stom适合处理流式数据,类似于sparkStreaming stom运行流程: 网络数据-> Spout-> bolts1-> bolts2->…->运行结束 **NOTE:**一个spout发布一个定义域列表。这个架构允许你使用不同的bolts从同一个spout流读取数据,它们的输出也可作为其它bolts的定义域,以此类推。 Tuple Tuple是Storm的主要数据结构 Storm中的Tuple与python中的tuple类似,其可以是任意长度的,只读的,每一个元素的数原创 2021-07-17 21:50:03 · 288 阅读 · 2 评论