Spark共享变量---Scala

Point 1：AccumulatorValue

package com.spark.sharevariables.scala

import org.apache.spark.{SparkContext, SparkConf}

/**
  * Created by Administrator on 2017/08/02.
  * 累加器中的全局变量只能由driver端读取，task只管干活，不能读如果用.value方法的话
  * 累加器如果你写到了Transformation这种转换算子内部的话呢，要想让这个累加器生效，必须
  * 在这个Transformation操作之前的有action操作！！！！例子如下：
  * val accum = sc.accumulator(0)
  * data.map { x => accum += x; f(x) }
  */
object AccumulatorValue {
   
  def main(args: Array[String]) {
    val conf  = new SparkConf().setAppName("Accumulator