Bulk Load使用--利用MapReduce job实现上传海量数据到HBase

1.Hadoop配置：
去掉hadoop-env.sh里HADOOP_CLASSPATH前的注释，并在其前一行添加HBASE_HOME,如下，
export HBASE_HOME = XXX
export HADOOP_CLASSPATH=$HBASE_HOME/hbase-X.X.X.jar:$HBASE_HOME/hbase-X.X.X-test.jar:$HBASE_HOME/conf:${HBASE_HOME}/lib/zookeeper-X.X.X.jar:${HBASE_HOME}/lib/guava-r06.jar
2.将$HBASE_HOME/conf下的hbase-site.xml拷到$HADOOP_HOME/conf目录下，将$HBASE_HOME/下的hbase-X.X.X.jar拷到$HADOOP_HOME/lib目录下，并启动/重启hadoop和hbase
3.将文档上传到hdfs上（我们这里将test20g.txt上传到hdfs的/cloudolap目录下）
hadoop fs -put ../test20g.txt /cloudolap
4.在HBase新建将要导入的表（只需要表名和列族名）
create 'test20g','d','f'（这里我们新建表"test20g"，rowkey是默认的，有两个列族分别为"d"和"f"）
5.上传数据
hadoop jar ../../hbase-0.90.3/hbase-0.90.3.jar importtsv -Dimporttsv.columns=HBASE_ROW_KEY,d:L_ORDERKEY,d:L_PARTKEY,d:L_SUPPKEY,d:L_LINENUMBER,f:L_QUANTITY,f:L_EXTENDEDPRICE,f:L_DISCOUNT,f:L_TAX,f:L_RETURNFLAG,f:L_LINESTATUS,d:L_SHIPDATE,d:L_COMMITDATE,d:L_RECEIPTDATE,f:L_SHIPINSTRUCT,f:L_SHIPMODE test20g /cloudolap/test20g.txt
（说明：源文件默认以"\t"为分割符，如果需要换成其它分割符，在执行时加上-Dimporttsv.separator=","，则变成了以","分割）
至此就可以完成海量数据上传到HBase上了。