![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
shark
文章平均质量分 79
bluetropic
这个作者很懒,什么都没留下…
展开
-
Spark独立部署模式
Spark独立部署模式原文连接:http://spark-project.org/docs/latest/spark-standalone.html翻译的水平有限,欢迎批评指正,转载请注明出处。除了部署在Mesos之上, Spark也支持独立部署模式, 包括一个Spark master进程和多个 Spark worker进程. 独立部署模式可以运行在单机上作为测翻译 2013-07-22 16:35:01 · 8088 阅读 · 0 评论 -
如何在集群上运行Shark
如何在集群上运行Shark本文介绍在计算机集群上如何启动和运行Shark。如果对Amazon EC2上运行Shark感兴趣,请点击这里查看如何使用EC2脚本快速启动预先配置好的集群。依赖:注意:Shark是一个即插即用的工具,所以可以在现有的Hive数据仓库之上运行,不需要您对现有的部署做出任何修改。在集群上运行Shark需要一下几个外部组件:Scala 2.9.3Spar翻译 2013-07-21 22:03:02 · 2754 阅读 · 1 评论 -
ubuntu12.04集群安装Spark
原文地址:http://blog.csdn.net/yangning5850/article/details/9143151目录(?)[-]下载Spark下载Scala安装sbt编译Spark关于Hadoop版本Spark——Lightning-Fast Cluster Computing,这是Spark 官方logo的内容,让人很期待它的计算速度是否真的如此之快。转载 2013-07-26 14:38:00 · 1298 阅读 · 0 评论 -
Spark随谈(一)—— 总体架构
http://www.16kan.com/post/113877.htmlSpark是一个小巧玲珑的项目,由Berkeley大学的Matei为主的小团队所开发。使用的语言是Scala,项目的core部分的代码只有63个Scala文件,充分体现了精简之美。Spark之依赖(1)Map Reduce模型作为一个分布式计算框架,Spark采用了MapReduce模型。在它身上,Goo转载 2013-07-27 11:22:56 · 1298 阅读 · 0 评论