- JavaSpark | 算子
- JavaSpark | RDD实战:WordCount
- JavaSpark | RDD实战:统计网站 pv 和 uv
- JavaSpark | RDD实战:二次排序
- JavaSpark | RDD实战:分组top n
- JavaSpark | SparkSQL | 创建DataSet | UDF与UDAF | 开窗函数
javaSpark完成单词计数并进行排序的小案例
- 数据如下:
- 代码如下:
package com.shsxt.java; import org.apache.spark.SparkConf; import org.apache.spark.api.java.JavaRDD; import org.apache.spark.api.java.JavaSparkContext; import org.apache.spark.api.java.function.*; import scala.Tuple2; import java.util.Arrays; import java.util.Iterator; import java.util.List; public class TransforationOperator { public static void main(String[] args) { //新建JavaSparkContext执行环境入口对象 SparkConf conf = new SparkConf()