spark配置
介绍
高性能并行计算引擎storm和spark的比较:
storm:
实时计算模型:纯实时,来一条数据,处理一条数据
健壮性/容错性:ZooKeeper,Acker,非常强
动态调整并行度:支持
spark:
实时计算模型:准实时,对一个时间段内的数据收集起来,作为一个RDD,再处理
健壮性/容错性:Checkpoint,WAL,一般
动态调整并行度:不支持
原文:https://www.jianshu.com/p/5626612bf10c
spark配置
1.解压配置文件
只用下载spark对应版本,sc
原创
2020-09-25 17:06:48 ·
158 阅读 ·
0 评论