Storm简介

Storm是一款用于实时流处理的应用框架,支持多种编程语言。主要应用于实时分析、在线机器学习等领域,具备每秒处理百万条数据的能力,并且可以很好地扩展及容错。其核心组件包括拓扑、Spouts和Bolts等。
摘要由CSDN通过智能技术生成

Storm是实时流式数据处理框架,支持多种编程语言


应用案例:

realtime analytics

online machine learning

continuous computation

distributed RPC

ETL


性能:a million tuples per second per node


可扩展、高容错

结合消息队列和数据库一起使用,消息队列作为数据源,数据库作为结果的输出。


基本概念:

Topologies:拓扑,也称为一个任务,即数据的输入-->处理-->输出的过程

Spouts:拓扑的消息源

Bolts:拓扑的处理逻辑单元


Tuple:消息元组,Spouts的数据输出最小单元

Stream:流

Stream grouping:流的分组策略


Tasks:任务处理单元

Executor:工作线程

Workers:工作进程


Configuration:topology的配置

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值