- 博客(5)
- 收藏
- 关注
原创 Spark基础链接汇总
1. 厦门大学子雨大数据spark入门教程(scala版)2. spark-submit 提交模式简介3. Spark Streaming基础4. Spark架构中的Driver和Worker5. SparkStreaming对接Hbase和MySQL数据库6. 知乎: spark中的RDD究竟怎么理解7. spark使用parallelize方法创建RDD 8. spark任务的三...
2018-10-09 21:00:15
487
原创 spark笔记
这里写自定义目录标题spark-submit提交模式Saprk CoreRDDSpark StreamingSpark SQLspark-submit提交模式基本语句、参数简介及提交模式Saprk CoreRDDRDD的定义,简介RDD源码定义abstract class RDD[T: ClassTag](@transient private var sc: SparkCon...
2018-10-09 19:59:34
128
原创 Scala笔记(二)
scala 里的对象 http://dblab.xmu.edu.cn/blog/953-2/Scala中的继承与Java有着显著的不同: (1)重写一个非抽象方法必须使用override修饰符。 (2)只有主构造器可以调用超类的主构造器。 (3)在子类中重写超类的抽象方法时,不需要使用override关键字。 (4)可以重写超类中的字段。抽象类:abstract clas...
2018-07-04 15:05:46
241
原创 Scala笔记(一)
scalaScala有两种类型的变量,一种是val,是不可变的,在声明时就必须被初始化,而且初始化以后就不能再赋值;另一种是var,是可变的,声明的时候需要进行初始化,初始化以后还可以再次对其赋值val myStr = "Hello World!"var myPrice : Double = 9.9var myPrice = 9.9字面量包括整数字面量、浮点数字面量、布尔型字面...
2018-07-04 14:58:18
303
原创 Linux命令、操作笔记
Linux常用命令笔记 locate locate /etc/my       //搜索etc目录下所有以my开头的文件locate(locate) 命令用来查找文件或目录。 locate命令要比find -name快得多,原因在于它不搜索具
2018-06-27 15:30:36
118
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人