spark
BinaryCSharp
这个作者很懒,什么都没留下…
展开
-
Spark 安装 及 HelloWorld
说明本篇主要介绍 Spark 的安装 及 HelloWorld程序(其实是计算一个文件的行数)。 环境: spark-2.1.0-bin-hadoop2.6.tgz安装Spark 其实属于免安装,所有的安装过程只不过是解压:tar -zxvf spark-2.1.0-bin-hadoop2.6.tgzHello WorldSpark可以进入到shell环境中进行操作,提供有 pySpark 和 s原创 2017-03-25 15:45:00 · 2465 阅读 · 0 评论 -
Spark Transformation 简介
说明本片简单介绍一下 Spark Transformation 以及一些常用的 Transformation,由于刚开始接触,内容较少,后续持续完善。 参考资料: 慕课网视频: http://www.imooc.com/video/14397/0 知乎讨论(flatMap 与 Map)https://www.zhihu.com/question/34548588?sort=creat原创 2017-03-25 21:18:19 · 912 阅读 · 0 评论