storm mapreudce spark streaming 区别

  • Storm 与 MapReduce
    • Storm:进程、线程常驻内存运行,数据不进入磁盘,数据通过网络传递。
    • MapReduce:为TB、PB级别数据设计的批处理计算框架。
  • Storm 与 Spark Streaming
    • Storm:纯流式处理 专门为流式处理设计 数据传输模式更为简单,很多地方也更为高效 并不是不能做批处理,它也可以来做微批处理,来提高吞吐量
    • Spark Streaming:微批处理将RDD做的很小来用小的批处理,来接近流式处理基于内存和DAG可以把处理任务做的很快

转载于:https://www.cnblogs.com/xiangyuguan/p/11077319.html

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值