Spark算子:RDD基本转换操作(mapPartitions、mapPartitionsWithIndex)
1、mapPartitions函数定义:def mapPartitions[U](f: (Iterator[T]) => Iterator[U], preservesPartitioning: Boolean = false)(implicit arg0: ClassTag[U]): RDD[U] 该函数和map函数类似,只不过映射函数的参数由RDD中的每一个元素变成了R
转载
2016-04-21 17:55:44 ·
1341 阅读 ·
0 评论