spark-TopK算法

• Case:
  输入：文本文件
  输出：
  (158,)
  (28,the)
  (19,to)
  (18,Spark)
  (17,and)
  (11,Hadoop)
  (10,##)
  (8,you)
  (8,with)
  (8,for)
• 算法：
  首先实现wordcount，topk实现是以wordcount为基础，在分词统计完成后交换key/value，然后调用sortByKey进行排序。
• java

import org.apache.spark.SparkConf;
import org.apache.spark.api.java.JavaPairRDD;
import org.apache.spark.api.java.JavaRDD;
import org.apache.spark.api.java.JavaSparkContext;
import org.apache.spark.api.java.function.FlatMapFunction;
import org.apache.spark.api.java.function.Function2;
import org.apache.spark.api.java.function.PairFunction;