Cloudera配置开发环境

9 篇文章 0 订阅
4 篇文章 0 订阅

HADOOP集群,以及其它相关的集群如HBase是用Cloudera搭建的,那么就要配置相应的Cloudera的开发环境,接下来会以开发HBase的Coprocessor为例:其部署集群使用的Cloudera为5.2.4

以下是基本的步骤:

1.在maven的pom.xml文件中加入cloudera的maven仓库:(红色部分)

<repositories>
<!-- cloudera 的仓库 -->
<repository>
<id>cloudera</id>
<url>https://repository.cloudera.com/artifactory/cloudera-repos/</url>
</repository>

<repository>
<id>spring-milestone</id>
<url>http://repo.springsource.org/libs-milestone</url>
</repository>
<repository>
<id>oschina Releases</id>
<name>oschina Releases</name>
<url>http://maven.oschina.net/content/groups/public</url>
</repository>
</repositories>

2.到http://www.cloudera.com/documentation/enterprise/latest/topics/cdh_vd_cdh5_maven_repo.html中查找自已cloudera的版本这里选择5.2.4


3.到页面选择相关的maven坐标:


4.把坐标添加到maven依赖中:

<dependency>
<groupId>org.apache.hbase</groupId>
<artifactId>hbase-server</artifactId>
<version>0.98.6-cdh5.2.4</version>
</dependency>

这样就完成了Cloudera的hbase开发环境的配置,其它模块方式同样。

如下就可以进行相关模块的开发了:

import java.io.IOException;
import java.util.List;
import org.apache.hadoop.hbase.Cell;
import org.apache.hadoop.hbase.CellUtil;
import org.apache.hadoop.hbase.client.Get;
import org.apache.hadoop.hbase.coprocessor.BaseRegionObserver;
import org.apache.hadoop.hbase.coprocessor.ObserverContext;
import org.apache.hadoop.hbase.util.Bytes;

public class PutObserver extends BaseRegionObserver {

    @Override
    public void preGetOp(final ObserverContext e, final Get get, final List results)
    throws IOException {   
			..........................
			..........................
        }
    }
}

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值