- 博客(3)
- 收藏
- 关注
RSS订阅转载 TopN——GroupTopN
TopN：package spark.core;import java.util.List;import org.apache.spark.SparkConf;import org.apache.spark.api.java.JavaPairRDD;import org.apache.spark.api.java.JavaRDD;import org....
2019-01-23 18:04:00
116
转载 SparkRDD未持久化——持久化
RDD的持久化策略: cache、persist、checkpoint三种策略（持久化的单位是partition）1、cache是persist的一个简化版，会将rdd中的数据持久化到内存中 cache = persists（StorageLevel.MEMORY_ONLY） 不进行序列化特点： cache的返回值 必须赋值给一个新的RDD变量， 在其他的job中直接使用这...
2019-01-20 17:59:00
130
转载 WordCount对比spark——java
使用spark编写的WordCount！package com.testimport org.apache.spark.{SparkConf, SparkContext}object Spark_Test { def main(args: Array[String]): Unit = { val sparkConf = new SparkCo...
2019-01-20 15:44:00
102
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人