- 博客(7)
- 收藏
- 关注
原创 用java编写spark程序,简单示例及运行
import org.apache.spark.api.java.JavaPairRDD; import org.apache.spark.api.java.JavaRDD; import org.apache.spark.api.java.JavaSparkContext; import org.apache.spark.api.java.function.FlatMapFunction; im
2014-04-08 17:47:27 48545 4
原创 oozie 3.3.2在hadoop 2.2.0下的安装部署,及问题解决
oozie的安装部署及配置感觉不是一般的繁琐,而且层出不穷的bug也弄的我焦头烂额,下面主要讲下我的安装过程及遇到的问题 一.必要准备: 1. Apache的tomcat 2. mysql-connector-java-5.1.6.jar 或其他版本的mysql-connectorjar包 3. ext-2.2.zip 二.安装部署 0
2013-11-15 14:35:08 7616 14
原创 Tez在hadoop 2.2.0下的安装部署测试
1. 我的安装环境: a) hadoop2.2.0 b) probuf2.5.0 , probuf的安装可参考:http://blog.csdn.net/guoyilongedu/article/details/17093811 c) Tez-0.2.0 2. 安装Tez, a) 下载,Tez
2014-02-20 18:23:26 10084 5
原创 hbase probuf版本不一致问题的解决
我的环境; hbase 0.94.11 hadoop 2.2.0 使用官网下载的hadoop和hbase进行安装的时候,hbase会报错: java.lang.VerifyError: class org.apache.hadoop.hdfs.protocol.proto.ClientNamenodeProtocolProtos$AppendRequestProto ov
2013-11-15 14:06:53 10208
原创 hbase在hadoop2.2.0编译安装,及常见问题
我的环境是: hadoop 2.2.0 hbase 0.94.11 有5台机器: baby19,baby18,baby17,baby16,baby15 一. 编译; 1. 下载hbase,解压 2. hbase的pom.xml里面hadoop 2.0用的是2.0.0-alpha,编辑pom.xml, 把2.0.0-alpha 改成: 2.2.0。 3.
2013-11-12 17:11:36 3637
原创 linux下安装maven
最近要在linux下边一很多东西,所以需要安装一下maven 安装方式非常简单,解压之后设置一下环境变量就可以了 1.首先到Maven官网下载安装文件; 2.进入下载文件夹,找到下载的文件,运行如下命令解压 tar -xvf apache-maven-3.0.5-bin.tar.gz 解压后的文件夹名为apache-maven-3.0.5 4
2013-11-12 16:51:38 1827
原创 zookeeper的安装部署
我的环境: hadoop 2.2.0 zookeeper 3.4.5 1. 下载zookeeper,官网下载,http://zookeeper.apache.org/ 2. 解压,tar -xvf zookeeper-3.4.5.tar.gz 3. 在解压出来的zookeeper目录下新建一个目录,我建的是data,用于存放数据
2013-11-12 16:46:13 1066
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人