Spark Notes
aggregate(zeroValue, seqOp, combOp)
zeroValue: 提供的初始值,seqOp 对其进行多次计算应当不改变计算结果,e.g. 0+…+0+x=x, 1*1*…*1*x=x
listRDD = sc.parallelize([1,2,3,4], 2)
# local_result: zeroValue
seqOp = (lambda local_res...
原创
2018-08-10 11:40:25 ·
1238 阅读 ·
0 评论