排序:
默认
按更新时间
按访问量

Hadoop与spark的区别-draft

一、Hadoop架构Hadoop提供了在集群机器中实现容错、并行处理框架,具有两个关键能力:    HDFS:分布式存储    MapReduce:分布式计算二、Spark架构Spark建立在Hadoop概念之上。三、 Spark与Hadoop的区别1. Spark在鸡群中每个机器节点上的内存(R...

2018-04-17 11:31:55

阅读数:46

评论数:0

spark scala 对RDD进行过滤----filter使用方法

spark scala中对RDD过滤的写法

2017-12-20 09:55:38

阅读数:2546

评论数:0

spark scala 对dataframe进行过滤----filter方法使用

val df = sc.parallelize(Seq(("a", 1), ("a", 2), ("b", 2), ("b", 3), ("c", 1))).toDF("id...

2017-12-20 09:34:46

阅读数:4704

评论数:0

spark scala Long类型范围和

scala> val a:Long=1512631111415 :1: error: integer number too large        val a:Long=1512631111415                   ^ scala> val a:Lo...

2017-12-07 16:02:37

阅读数:379

评论数:0

提示
确定要删除当前文章?
取消 删除
关闭
关闭