- 博客(1)
- 收藏
- 关注
原创 Spark算子总结
Transformation: 1.map map的输入变换函数应用于RDD中所有元素,而mapPartitions应用于所有分区。区别于mapPartitions主要在于调用粒度不同。 如parallelize(1 to 10, 3),map函数执行10次,而mapPartitions函数执行3次。 2.filter(function) 过滤操作,满足filter内function函数为true...
2019-08-14 11:24:06 174
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人