![](https://img-blog.csdnimg.cn/20201201181531783.jpeg?x-oss-process=image/resize,m_fixed,h_224,w_224)
Storm
Storm是一个分布式计算框架,主要由Clojure编程语言编写。最初是由Nathan Marz及其团队创建于BackType,该项目在被Twitter取得后开源。它使用用户创建的“管”和“螺栓”来定义信息源和操作来允许批量、分布式处理流式数据。最初的版本发布于2011年9月17日。
风向决定发行D
在读硕士
展开
-
Apache Storm学习笔记(3)Apache Storm的组成部分并行度的理解
一个WORKER PROCESS一个worker process执行topology的一个子集。worker process属于特定的topology,并且可以为该topology的一个或多个组件(spout或bolt)运行一个或多个executor。正在运行的topology由在Storm集群中的许多机器上运行的类似worker process组成。一个executor是由一个worker process催生了一个线程。它可能针对同一组件(spout或bolt)运行一项或多项任务。一个原创 2020-09-17 14:58:45 · 154 阅读 · 0 评论 -
Apache Storm学习笔记(2)Apache Storm的组成部分及工作流程
Apache Storm的相关术语StreamApache Storm的基本结构Apache Storm是分布式实时计算系统,其组成结构如下:原创 2020-07-31 16:45:01 · 350 阅读 · 0 评论 -
Apache Storm学习笔记(1)流计算概述
静态数据和流数据静态数据是静止不动的,不变化的,历史的数据,一般来说像数据仓库存储的大量历史数据就是静态数据,通过数据挖掘等技术来获取数据信息流数据是大量,快速,随时间变化,持续到达,在时间分布和数量上五上限的一系列动态数据集合体,数据记录是流数据的最小组成单元攻击服务器记录交通工具、工业设备和农业机械上的传感器将数据发送到流处理应用程序。该应用程序再监控性能,提前检测任何潜在缺陷,自动订购备用部件,从而防止设备停机。一家金融机构实时跟踪股市波动,计算风险价值,然后根据股票价格变动自动重新平原创 2020-07-18 21:53:58 · 689 阅读 · 0 评论