![](https://img-blog.csdnimg.cn/20201014180756724.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
spark
道里听音
这个作者很懒,什么都没留下…
展开
-
spark入门名词解释
Spark + HDFS的运行架构图(http://www.oschina.net/news/76763/spark-architecture?from=timeline&isappinstalled=0)Driver:运行Application的main函数并创建SparkContext,SparkContext准备Spark应用程序的运行环境、负责资源的申请、任务分配和监控等。当Exe...原创 2018-02-26 17:26:39 · 569 阅读 · 0 评论 -
Scala的Option类型
Scala的Option类型为了让所有东西都是对象的目标更加一致,也为了遵循函数式编程的习惯,Scala鼓励你在变量和函数返回值可能不会引用任何值的时候使用Option类型。在没有值的时候,使用None,这是Option的一个子类。如果有值可以引用,就使用Some来包含这个值。Some也是Option的子类。None被声明为一个对象,而不是一个类,因为我们只需要它的一个实例。这样,它多少有点像nu...转载 2018-03-14 15:06:08 · 345 阅读 · 0 评论