- 博客(3)
- 资源 (4)
- 收藏
- 关注
RSS订阅原创 Spark1.6.0 源码编译和部署包生成
文章基本采用官方指导：1、在spark官网下载源码，要选择source code2、在环境变量里设置maven内存大小export MAVEN_OPTS="-Xmx2g -XX:MaxPermSize=512M -XX:ReservedCodeCacheSize=512m"3、编译及打包## 简单的编译Spark和example程序 mvn -DskipT
2015-03-27 16:18:31
4968
原创 spark编译及运行常见错误
### spark 下载 http://spark.apache.org/downloads.html### 前提准备 # 安装 JDK，mvn 和 scale，并设置对应的JAVA_HOME,MVN_HOME 和 SCALA_HOME### Spark 编译 （参考 http://spark.apache.org/docs/latest/bui
2015-03-27 15:49:42
3126
转载 利用QJM实现HDFS的HA策略部署与验证工作记录分享
1、概述 Hadoop2.X中的HDFS(Vsersion2.0)相比于Hadoop1.X增加了两个重要功能，HA和Federation。HA解决了Hadoop1.X Namenode中一直存在的单点故障问题，HA策略通过热备的方式为主NameNode提供一个备用者，并且这个备用者的状态一直和主Namenode的元数据保持一致，一旦主NameNode挂了，备用NameNode
2015-03-04 15:08:38
819
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人