storm
文章平均质量分 83
gongrui_59
。。。
展开
-
storm解析及wordcount简单实例
storm:分布式实时流计算框架 storm分为单机模式和集群模式。 在集群模式下: Storm由一个主节点和多个工作节点组成。主节点运行了一个名为“Nimbus”的守护进程,用于分配代码、布置任务及故障检测。每个工作节点都运行了一个名为“Supervisor”的守护进程,用于监听工作,开始并终止工作进程。Nimbus和Supervisor都能快速失败,而且是无状态的,这样一来它们就变得十分健原创 2017-08-15 16:51:19 · 1854 阅读 · 0 评论 -
Storm消息的可靠性
什么是消息的完整性处理? 一个从 spout 中发送出的 tuple 会产生上千个基于它创建的 tuples。例如,有这样一个 word-count 拓扑:TopologyBuilder builder = new TopologyBuilder(); builder.setSpout("sentences", new KestrelSpout("kestrel.backtype.com", 22原创 2017-08-18 16:20:05 · 492 阅读 · 0 评论