Spark
木_樨
大数据爱好者,欢迎大家关注我!
展开
-
Spark介绍与环境搭建
1.什么是Spark(官网:http://spark.apache.org)Spark是一种快速、通用、可扩展的大数据分析引擎,2009年诞生于加州大学伯克利分校AMPLab,2010年开源,2013年6月成为Apache孵化项目,2014年2月成为Apache顶级项目。目前,Spark生态系统已经发展成为一个包含多个子项目的集合,其中包含SparkSQL、Spark Stream原创 2017-01-03 14:41:27 · 487 阅读 · 0 评论 -
Spark实例
1、入门object HelloSpark { def main(args: Array[String]): Unit = { val conf = new SparkConf().setAppName("Simple Application").setMaster("local") val sc = new SparkContext(conf) sc.addJar("C原创 2017-02-27 15:10:12 · 506 阅读 · 0 评论