Strom的描述和安装

本文介绍了Strom的特点,包括其架构、编程模型、数据传输和高可用性。Strom实时低延迟的原因在于常驻内存和避免磁盘IO。同时,文章对比了Strom与Hadoop、Spark Streaming的差异,强调了Strom在实时处理和低延迟上的优势。
摘要由CSDN通过智能技术生成

一,Strom的特点

1,架构:
1.1,Nimbus
1.2,Supervisor
1.3,Worker

2.2,编程模型:
2.1,DAG
2.2,Spout
2.3,Bolt

3,数据传输:
3.1,Zmq
         Zmq也是开源的消息传递的框架,虽然叫mq,但它并不是一个message queue,而是一个封装的比较好的
3.2,Netty
       netty是NIO的网络框架,效率比较高。之所以有netty是storm在apache之后呢,zmq的license和storm的license不兼容的,bolt处理完消息后会告诉Spout
   
4,高可用性:
4.1,异常处理
4.2,消息可靠性保证机制

5,可维护性:Storm有个UI可以看跑在上面的程序监控

二,Strom实时低延迟,主要有两个原因

1,Strom进程是常驻内存的,不像Hadoop里面是不断的启停的,就没有不断启停的开销。
2,Strom的数据是不经过磁盘的,都是在内存里面,处理完就没有了,处理完就没有了,数据的交换经过网络,这样就避免磁盘IO的开销,所以Strom可以很低的延迟。

三,Strom和Hadoop的区别

1,数据来源:Hadoop是HDFS上某个文件夹下的可能是

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值