在开发测试中使用HBaseMiniCluster

Author: Shi, Shaofeng

      为了方便开发人员，HBase以及其它Hadoop组件提供了Mini Cluster的运行方式：在一个JVM里模拟运行Hadoop集群，包括HDFS，Zookeeper，HBase 以及MapReduce；如果你需要运行一些简单的代码或测试案例，或者想在IDE中通过断点来调试，那么这时候用Mini Cluster就再合适不过了；HBase的单元测试中已经频繁使用这种方法；本文将介绍 Mini Cluster的几种简单使用：

• 启动、停止HBase Mini Cluster
• 创建HTable，输入以及查询数据
• 运行MapReduce任务
• 导入导出HTable数据

1.准备

      要使用HBase Mini Cluster，最方便的办法是使用HBASETestingUtility类；这个类提供了启动、停止、创建、配置等实用方法来管理Mini Cluster；如果你的项目是用Maven管理，只要加入此依赖就可以：

   <dependencies>

      …

      <dependency>
         <groupId>org.apache.hbase</groupId>
         <artifactId>hbase-server</artifactId>
              <version>0.98.8-hadoop2</version>
              <scope>provided</scope>
      </dependency>
      <dependency>
         <groupId>org.apache.hbase</groupId>
         <artifactId>hbase-testing-util</artifactId>
         <version>0.98.8-hadoop2</version>
         <scope>provided</scope>
      </dependency>
…
   </dependencies>

 2.启动、停止Mini Cluster

      首先构造一个HBaseTestingUtility的实例，然后调用它的startMiniCluster()方法；它会启动一个HDFS的Mini Cluster以及一个Zookeeper的Mini Cluster，启动完成后返回一个MiniHBaseCluster对象；

 

HBaseTestingUtility UTIL = new HBaseTestingUtility();

MiniHBaseCluster hbaseCluster