teddeyang-CSDN博客

原创用java编写spark程序，简单示例及运行

import org.apache.spark.api.java.JavaPairRDD;import org.apache.spark.api.java.JavaRDD;import org.apache.spark.api.java.JavaSparkContext;import org.apache.spark.api.java.function.FlatMapFunction;im

2014-04-08 17:47:27 48545 4

原创 oozie 3.3.2在hadoop 2.2.0下的安装部署，及问题解决

oozie的安装部署及配置感觉不是一般的繁琐，而且层出不穷的bug也弄的我焦头烂额，下面主要讲下我的安装过程及遇到的问题一．必要准备：1. Apache的tomcat2. mysql-connector-java-5.1.6.jar 或其他版本的mysql-connectorjar包3. ext-2.2.zip 二．安装部署0

2013-11-15 14:35:08 7616 14

原创 Tez在hadoop 2.2.0下的安装部署测试

1. 我的安装环境：a) hadoop2.2.0b) probuf2.5.0 ， probuf的安装可参考：http://blog.csdn.net/guoyilongedu/article/details/17093811c) Tez-0.2.02. 安装Tez，a) 下载，Tez

2014-02-20 18:23:26 10084 5

原创 hbase probuf版本不一致问题的解决

我的环境；hbase 0.94.11hadoop 2.2.0使用官网下载的hadoop和hbase进行安装的时候，hbase会报错： java.lang.VerifyError: class org.apache.hadoop.hdfs.protocol.proto.ClientNamenodeProtocolProtos$AppendRequestProto ov

2013-11-15 14:06:53 10208

原创 hbase在hadoop2.2.0编译安装，及常见问题

我的环境是：hadoop 2.2.0 hbase 0.94.11有5台机器：baby19,baby18,baby17,baby16,baby15一. 编译；1.下载hbase，解压2.hbase的pom.xml里面hadoop 2.0用的是2.0.0-alpha，编辑pom.xml，把2.0.0-alpha 改成： 2.2.0。 3.

2013-11-12 17:11:36 3637

原创 linux下安装maven

最近要在linux下边一很多东西，所以需要安装一下maven安装方式非常简单，解压之后设置一下环境变量就可以了1.首先到Maven官网下载安装文件； 2.进入下载文件夹，找到下载的文件，运行如下命令解压tar -xvf apache-maven-3.0.5-bin.tar.gz解压后的文件夹名为apache-maven-3.0.54

2013-11-12 16:51:38 1827

原创 zookeeper的安装部署

我的环境：hadoop 2.2.0zookeeper 3.4.51. 下载zookeeper，官网下载，http://zookeeper.apache.org/2. 解压，tar -xvf zookeeper-3.4.5.tar.gz3. 在解压出来的zookeeper目录下新建一个目录，我建的是data，用于存放数据

2013-11-12 16:46:13 1066

teddeyang的专栏