Spark计算模型之熟练使用RDD的算子完成计算 ----tranfoemation
Spark计算模型之熟练使用RDD的算子完成计算 ----tranfoemation
1.弹性分布式数据集RDD
1.1什么是RDD RDD(Rsedilient Distributed Dataaset)叫做分布式数据集,是Spark中最基本的数据抽象,它代表一个不可变、可分区、里面的元素可并行计算的集合。RDD具有数据模型的特点:自动容错、位置感知性调度和可伸缩性。RDD允许用...
原创
2019-01-10 21:39:51 ·
340 阅读 ·
0 评论