Storm
田小雨
厚积才能薄发!自己选择的路,再苦再累也要坚持走下去
展开
-
storm与hadoop的对比
hadoop 是实现了 mapreduce 的思想,将数据切片计算来处理大量的离线数据。hadoop处理的数据必须是已经存放在 hdfs 上或者类似 hbase 的数据库中,所以 hadoop 实现的时候是通过移动计算到这些存放数据的机器上来提高效率而 storm 不同,storm 是一个流计算框架,处理的数据是实时消息队列中的,所以需要我们写好一个 topology 逻辑放在那,原创 2015-07-02 16:41:24 · 1267 阅读 · 0 评论 -
Storm简述及集群安装
Storm 集群类似于一个 Hadoop 集群。 然而你在 Hadoop 的运行“MapReduce job” ,在storm 上你运行 “topologies (不好翻译)” 。 “job”和“topologies ”本身有很大的不同 - 一个关键的区别是,MapReduce 的工作最终完成,而 topologies 处理消息永远保持(或直到你杀了它) 。Strom 集群有主要有两类原创 2015-07-02 16:33:52 · 921 阅读 · 0 评论 -
Storm计算结果是如何存放的
Storm计算的结果存放在哪里? 刚开始接触Storm的时候,往往都会有这么一个疑问:“Storm处理后的计算结果是保存在哪里呢?”是内存中还是在其它的地方? 官方给出的解释是:Storm不负责保存计算结果,计算结果由运算程序来负责,如果数据不大,可以简单的保存在内存里,可以每次更新到数据库,或者采用NoSQL来进行存储。Storm没有像s4那样原创 2015-07-17 18:12:46 · 3221 阅读 · 0 评论