Storm
文章平均质量分 74
peng_0129
这个作者很懒,什么都没留下…
展开
-
流式计算storm介绍
------流式计算是什么流式计算:数据实时产生、数据实时传输、数据实时计算、实时展示 代表技术:Flume实时获取数据、Kafka/metaq实时数据存储、Storm/JStorm实时数据计算、Redis实时结果缓存、持久化存储(mysql)。 一句话总结:将源源不断产生的数据实时收集并实时计算,尽可能快的得到计算结果-------storm是什么 ...原创 2018-07-11 11:13:47 · 767 阅读 · 0 评论 -
storm核心组件和编程模型
----- storm核心组件 Nimbus:负责资源分配和任务调度。 Supervisor:负责接受nimbus分配的任务,启动和停止属于自己管理的worker进程。---通过配置文件设置当前supervisor上启动多少个worker。 Worker:运行具体处理组件逻辑的进程。Worker运行的任务类型只有两种,一种是Spout任务,一种是Bolt任务。 Task:worker中每一个s...原创 2018-07-11 11:16:47 · 465 阅读 · 0 评论