Spark
flamimg
这个作者很懒,什么都没留下…
展开
-
Ubuntu12.04下安装maven
Ubuntu下载安装maven1.下载maven2.解压下载的文件#tar -zxvf apache-maven-3.3.1-bin.tar.gz3使用mv命令将apache-maven-3.3.1文件夹拷贝到自己指定的文件夹,比如/usr/local/下#mv apache-maven-3.3.1 /usr/local/4.配置环境变量,编辑/etc/原创 2015-04-09 18:16:54 · 791 阅读 · 0 评论 -
ubuntu12.04下安装spark
1.下载spark原创 2015-03-25 16:25:56 · 842 阅读 · 1 评论 -
利用Eclipse构建Spark集成开发环境
利用Eclipse构建Spark集成开发环境1.安装Scalaubuntu下安装Scala以前已经实现过,这里不再赘述,可以参考该网址进行Scala的安装。2.构建Spark集成开发环境(1)重新启动Eclipse,点击eclipse右上角方框按钮,如下图所示,展开查看是否有“Scala”一项,有的话,直接点击打开,否则进行(2)操作。(2)在Eclipse中,原创 2015-04-09 18:46:09 · 3277 阅读 · 0 评论 -
Ubuntu12.04下安装Scala
Ubuntu下安装Scala安装Scala:在安装Scala之前需要先安装java,这里不再赘述java的安装。1.下载Scala2.解压Scalatar -zxvf scala-2.11.6.tgz3.创建Scala目录mkdir /usr/share/scala4.拷贝Scala目录中的所有文件至Scala目录原创 2015-04-09 16:39:31 · 1013 阅读 · 0 评论 -
Spark简介
Spark简介概述什么是Spark§ Spark是UC Berkeley AMP lab所开源的类Hadoop MapReduce的通用的并行计算框架,Spark基于map reduce算法实现的分布式计算,拥有Hadoop MapReduce所具有的优点;但不同于MapReduce的是Job中间输出和结果可以保存在内存中,从而不再需要读写HDFS,因此Spark能更好地转载 2015-05-04 11:02:47 · 822 阅读 · 0 评论