对相同K,把V合并成一个集合.
把相同的K,的V进行reduce操作,就是把V相加
首先,第一步先对两个RDD进行cogroup操作,也就是把每个RDD中的元素构成集合,然后再合并成一个集合,第二步是:进行笛卡尔积.
Spark RDD中Transformation的combineByKey、reduceByKey,join详解
最新推荐文章于 2023-09-23 20:25:35 发布
对相同K,把V合并成一个集合.
把相同的K,的V进行reduce操作,就是把V相加
首先,第一步先对两个RDD进行cogroup操作,也就是把每个RDD中的元素构成集合,然后再合并成一个集合,第二步是:进行笛卡尔积.