RDD之累加器

先给大家看个列子

对比两种方法求和的结果，发现我们定义的函数来求和和我们使用累加器的结果一样，没错，累加器的作用就是对每一个RDD元素进行操作，累加器和分区有关系，其中的关系可以将accumulator(0)中0这个参数改变下或者设置分区来查看不同结果，这里就不一一说了，感兴趣的可以试下，设置分区可这样写：sc.partitions(2)，这样分区就设置成两个分区了，但这还是和我们的实际分区有关，加入你只有2个分区，设置分区为10，但是程序在实际应用中只有两个在运行。