![](https://img-blog.csdnimg.cn/20201014180756738.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
storm
虎钳
这个作者很懒,什么都没留下…
展开
-
Storm架构
storm是我接触并在项目中用到的第一个实时计算框架,做下总结: 一、首先如果如果让我们自己设 计一个实时计算系统,我们要解决哪些问题? 1、低延迟。都说了是实时计算系统了,延迟是一定要低的。 2、高性能。性能不高就是浪费机器。 3、分布式。系统都是为应用场景而生的,如果你的应用场景、你的数据和计算单机就能搞定,那么不用考虑这些复杂的问题了。我们所说的是单机搞不定的情况。 4、可扩展...2016-01-15 15:54:00 · 145 阅读 · 0 评论 -
Storm分组机制
Stream Grouping定义了一个流在Bolt任务间该如何被切分。这里有Storm提供的6个Stream Grouping类型: 1. 随机分组(Shuffle grouping):随机分发tuple到Bolt的任务,保证每个任务获得相等数量的tuple。 2. 字段分组(Fields grouping):根据指定字段分割数据流,并分组。例如,根据“user-id”字段,相同“user...2016-01-15 15:58:27 · 177 阅读 · 0 评论