技术的点点滴滴

原创 Spark中的转换算子transformation和动作算子action

主要记录了Spark中转换算子transformation和动作算子action具体含义和使用方法。 转换算子-transformation map(func) 返回一个新的分布式数据集，其中每个元素都是由源RDD中一个元素经func转换得到的。 filter(func) 返回一个新的数据集，其中包含的元素来自源RDD中元素经func过滤后（func返回true时才选中）的结果。 flatMa...