HBase
文章平均质量分 75
LambdaCC
我是LambdaCC
展开
-
HBase bulkload
通过直接生成HFile文件,可以将要保存数据bulkload到HBase中,速度比使用HBase API要快很多。在生成了HFile之后,一般通过HFileOutputFomat这个工具来将其导入到HBase表在HDFS中的目录。遇到的问题导入HFile时权限不够在使用HFileOutputFomat来导入HFile时,很可能会发现导入的过程卡住不动了,如下: 实际上,卡住的原因是因为在loadi原创 2015-05-15 09:53:15 · 1075 阅读 · 0 评论 -
利用Phoenix为HBase创建二级索引
为什么需要Secondary Index对于HBase而言,如果想精确地定位到某行记录,唯一的办法是通过rowkey来查询。如果不通过rowkey来查找数据,就必须逐行地比较每一列的值,即全表扫瞄。对于较大的表,全表扫瞄的代价是不可接受的。但是,很多情况下,需要从多个角度查询数据。原创 2015-05-17 15:10:35 · 27998 阅读 · 12 评论 -
HBase使用常见异常
无法连接ZooKeeper典型异常: INFO ClientCnxn: Opening socket connection to server localhost/127.0.0.1:2181. Will not attempt to authenticate using SASL (unknown error) 15/07/12 10:06:33 WARN ClientCnxn: Ses原创 2015-07-12 10:37:25 · 3283 阅读 · 0 评论 -
HBase中由Reverse DNS引起的问题
参考: HowTo Test or Check Reverse DNS on a Linux / Unix 使用HBase时的Reverse DNS相关问题当我们把HBase的Table作为MapReduce或者Spark的输入数据源时,容易碰到如下的问题: 15/07/06 17:03:31 WARN TableInputFormatBase: Cannot resolve the hos原创 2015-07-06 21:20:45 · 2352 阅读 · 0 评论