hbase
文章平均质量分 77
pigcoffee
精通C++、分布式应用,数据仓库、PostgreSQL相关工作。
展开
-
Hbase学习笔记一:安装
解压文件tar zxvf hbase-1.2.0-cdh5.9.1.tar.gz将解压包重命名mv hbase-1.2.0-cdh5.9.1 hbase配置环境变量vi ~/.bash_profileexport HBASE_HOME=/home/hadoop/cdh5.9.1/hbaseexport PATH=$HBASE_HOME/bin:$PATH并执行sou原创 2017-02-15 16:33:03 · 309 阅读 · 0 评论 -
Hive onver Hbase详解
Hbase不支持SQL语句查询,如果要实现count\group 等操作需要借助Mapreduce程序,门槛较高;Hive对于SQL的支持有强大的功能,我们不需要写过多的自定义函数就能实现较为复杂的查询;原创 2017-09-08 11:26:05 · 1777 阅读 · 0 评论 -
RegionServer异常超时检测
在hbase中设置超时时间是没用的,必须修改zookeeper自身的maxSessionTimeout为1200000,才能真正起到加长zookeeper的session超时时间的作用原创 2017-08-05 12:43:59 · 1151 阅读 · 0 评论 -
Hbase源码@RegionServer启动
HRegionServer继承关系成员变量private final AtomicLong scannerIdGen = newAtomicLong(0L)Scanner ID生成器protected MemStoreFlusher cacheFlusher 刷新memstore线程protected CatalogTracker catalogTr原创 2017-05-12 23:11:35 · 1036 阅读 · 0 评论 -
Hbase学习笔记2@数据导入导出
Hbase数据迁移:Copy方式:适用于较小集群、集群间网络不通,优点:操作简单,稳定性较好;distcp:适用于集群间网络互通场景下,效率较高;原创 2017-04-11 15:50:21 · 1168 阅读 · 0 评论 -
Hbase性能测试及优化过程记
针对Hbase flush\compact的测试优化。原创 2017-04-01 17:10:15 · 3567 阅读 · 0 评论 -
Hbase中Regionserver和Master主机时钟不同步导致Rs无法启动ClockOutOfSyncException
Hbase中Regionserver和Master主机时钟不同步导致Rs无法启动ClockOutOfSyncException原创 2017-03-12 22:15:59 · 587 阅读 · 0 评论 -
问题解决1@hdfs实际数据和备份数据不一致
Fsck检查HDFS,发现副本缺失;hadoop fsck / | grep replicated | grepTarget |awk -F ":" '{print $1}' |xargs hadoop fs -setrep -R 3原创 2017-03-09 16:15:38 · 1495 阅读 · 0 评论 -
Hbase集群间数据迁移
Hbase表数据迁移方案有distcp、copyTable 、export\import等方式。原创 2017-03-18 17:37:42 · 571 阅读 · 0 评论 -
Hbase学习笔记二:解决ERROR: Can't get master address from ZooKeeper; znode data == null
问题描述运行Hbase shell时报错:hbase(main):006:0> listTABLE原创 2017-02-15 16:40:51 · 11494 阅读 · 4 评论 -
Phoenix4.5适配CDH5.4
Phoenix和CDH版Hbase集成,启动Phoenix报如下错误:Error: org.apache.hadoop.hbase.DoNotRetryIOException: SYSTEM.CATALOG: org.apache.hadoop.hbase.client.Scan.setRaw(Z)Lorg/apache/hadoop/hbase/client/Scan;原创 2017-09-22 11:07:04 · 763 阅读 · 0 评论