spark
supingemail
这个作者很懒,什么都没留下…
展开
-
spark 属性配置
1.Spark1.x 属性配置方式 Spark属性提供了大部分应用程序的控制项,并且可以单独为每个应用程序进行配置。 在Spark1.0.0提供了3种方式的属性配置: SparkConf方式 SparkConf方式可以直接将属性值传递到SparkContext;SparkConf可以对某些通用属性直接配置,如master使用setMaster,appname原创 2015-07-01 23:38:50 · 4433 阅读 · 0 评论 -
spark 安装和使用
前言 早在很前,都已经安装过了集群了,那个时候的版本还很低,http://blog.csdn.net/supingemail/article/details/8835743 ,最近因为项目的需要,又开始屁颠屁颠的去学习hadoop的一套东西了... ... 淡不扯了,还是进入正题,看看hadoop 的伪分布式安装(知识这个玩意,真的是一天不用就生疏了,还必须要坚持才行,否则都是瞎扯淡) 准原创 2015-07-01 22:37:07 · 2770 阅读 · 0 评论