- 博客(2)
- 收藏
- 关注
RSS订阅原创 Spark基于排序机制的wordcount程序（Java版）
1，需求分析 前面我们已经学习Spark常用transformation和action的操作。那么现在问题来了，文本文件内的每个单词都出现几次？可否按照每个单词出现的次数排序？下面我们就来解决这个问题。2，实验准备 2.1. Java开发工具eclipse 2. 2.spark-1.6.0-bin-hadoop2.63，编码实战 3.1. 在eclipse新建java项目spark-l
2016-11-08 14:47:56
308
原创 Spark常用transformation和action操作
1，场景 spark的transformation和action操作乃spark的核心，让我们走进他们，领略他们的魅力！ 2，transformation和action介绍 Spark支持两种RDD操作：transformation和action。transformation操作会针对已有的RDD创建一个新的RDD；而action则主要是对RDD进行最后的操作，比如遍历、reduce、保
2016-11-07 17:49:03
980
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人