storm典型场景

2019独角兽企业重金招聘Python工程师标准>>>

流聚合

流聚合（stream join）是指将具有共同元组（tuple）字段的数据流（两个或者多个）聚合形成一个新的数据流的过程。

求TOP N

流式数据的TOP N计算的应用场景很多，例如计算twitter上最近一段时间内的热门事件、热门点击图片等等。

批处理

Storm对流数据进行实时处理时，一种常见场景是批量一起处理一定数量的tuple元组，而不是每接收一个tuple就立刻处理一个tuple，这样可能是性能的考虑，或者是具体业务的需要。

例如，批量查询或者更新数据库，如果每一条tuple生成一条sql执行一次数据库操作，数据量大的时候，效率会比批量处理的低很多，影响系统吞吐量。

storm-starter（代码见：https://github.com/nathanmarz/storm-starter）

转载于:https://my.oschina.net/LostTimes/blog/550031