![](https://img-blog.csdnimg.cn/20201014180756930.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Spark
文章平均质量分 82
xiaohang20103
这个作者很懒,什么都没留下…
展开
-
Spark学习第一天-转自徽沪一郎
Apache Spark源码走读之1 -- Spark论文阅读笔记 欢迎转载,转载请注明出处,徽沪一郎。 楔子 源码阅读是一件非常容易的事,也是一件非常难的事。容易的是代码就在那里,一打开就可以看到。难的是要通过代码明白作者当初为什么要这样设计,设计之初要解决的主要问题是什么。 在对Spark的源码进行具体的走读之前,如果想要快速对Spark的有一个整体性的认识,阅读Mat转载 2015-04-07 21:54:56 · 758 阅读 · 0 评论 -
Spark环境搭建-转自徽沪一郎
Apache Spark源码走读之2 -- Job的提交与运行 欢迎转载,转载请注明出处,徽沪一郎。 概要 本文以wordCount为例,详细说明spark创建和运行job的过程,重点是在进程及线程的创建。 实验环境搭建 在进行后续操作前,确保下列条件已满足。 下载spark binary 0.9.1安装scala安装sbt安装java 启动spark-she转载 2015-04-07 21:56:59 · 754 阅读 · 0 评论