bird的博客

原创 hbase批量导入之bulkloader使用实战

HBase大量导入数据时，使用client方式将会导致大量网络IO以及损耗集群计算资源，Hbase官方的bulkloader可以很好解决这个场景。 bulkloader支持将写成HFile格式的数据直接放入HBase，这个过程分为： 1.准备HFile格式的文件于HDFS中： 本样例代码场景为读取另一个HBase表中的数据，写为HFile格式。 其中写入方式可以通过MR任务