- 博客(3)
- 资源 (10)
- 收藏
- 关注
原创 maven 3.3.9编译spark1.5.0 cdh5.5.1
1、下载spark源码解压到目录/usr/local/spark-1.5.0-cdh5.5.1,看看是否有pom.xml文件 2、切换到目录/usr/local/spark-1.5.0-cdh5.5.1执行: 编译spark源代码的时候,需要从网上下载依赖包,所以整个编译过程机器必须保证在联网状态。编译执行如下脚本: [hadoop@hadoop spark-1.5.0-cdh5.5
2016-03-14 13:29:13 826
原创 centos yum源配置问题解决办法
问题: [root@hadoop yum.repos.d]# mount -t auto /dev/cdrom /mnt/cdrom mount: you must specify the filesystem type 解决办法: mount -o loop /dev/cdrom /mnt/cdrom/ 问题: Could not open/read file
2016-03-08 10:30:11 994
原创 初识Spark 1.6.0
1、 Spark发展背景 Spark由加州大学伯克利分校AMP实验室(Algorithms,Machines,andPeopleLab)以Matei为主的小团队使用Scala语言所开发,后期成立spark商业公司databricks,CEOAli,CTO Matei,后期愿景是实现databrickscloud。Spark是新一代基于内存迭代计算的、开源的、分布式的、并行的计算框架,抛去繁琐的
2016-03-03 14:51:23 697
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人