![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hbase
文章平均质量分 90
wangzhanchi8
这个作者很懒,什么都没留下…
展开
-
Hbase bulkLoad 批量入库遇到的问题及解决方法
1.2、BulkLoad 入库遇到问题及解决方法1.2.1、首先就是reduce相关的问题: 在实际的应用中你就会发现,对于稍大一点的数据量,map过程的执行效率还是比较让人满意的,但是到了reduce阶段就会出现比较严重的卡顿,我的困惑就是?我的代码里明明没有reduce过程,为什么还会有reduce过程来影响我入库的效率呢? 于是,我尝试着在job里,设置reduce的数量,把它设置为0,...转载 2018-03-08 19:21:56 · 4083 阅读 · 0 评论 -
CDH(cloudera)hbase completebulkload 命令批量入库报错
错误现象:问题描述:此问题是由于 利用MapReduce 入库Hbase表时,找不到对应的hbase jar包解决方法:将hbase目录下的lib中的jar拷贝到hadoop 对应的lib下边:即从/opt/cloudera/parcels/CDH/lib/hbase/lib 拷贝到 /opt/cloudera/parcels/CDH/lib/hadoop/lib备注:如果hadoop/lib下已...原创 2018-03-02 16:48:24 · 735 阅读 · 0 评论