hbase
yyoc97
--
展开
-
ClusterId read in ZooKeeper is null
HBase 链接问题总结写之前spark链接hbase的坑。异常Will not attempt to authenticate using SASL (unknown error)ClusterId read in ZooKeeper is nullHBase 配置代码val hBaseConf = HBaseConfiguration.create()hBase...转载 2018-09-09 18:03:30 · 6694 阅读 · 2 评论 -
hbase存储设计原理
文章目录存储思想LSM树简易模型存储模块简介hbase具体存储实现level 0level 1level 2存储思想HBase采用Log Structured Merge Trees(LSM)的存储思想。LSM树核心思想的核心就是放弃部分读能力,换取写入的最大化能力。LSM Tree ,这个概念就是结构化合并树的意思,它的核心思路其实非常简单,就是假定内存足够大,因此不需要每次有数据更新就...原创 2018-12-28 18:33:23 · 453 阅读 · 0 评论 -
regionserver.HRegionServerCommandLine: Region server exiting
hbase添加regionserver自动失败现象我们通过命令hbase-daemon.sh start regionserver来启动regionserver,会返回一个日志路径starting regionserver, logging to /var/log/hbase/hbase-root-regionserver-xxx.out不过这个文件里面并没有东西,但是我们可以找到hbas...原创 2018-12-24 22:52:21 · 8448 阅读 · 0 评论 -
上海久耶HBase实时数仓探索实践
文章从六个方面介绍,首先是久耶第一代离线数仓以及第二代实时数仓。接下来介绍下公司业务场景和业务开发,基于 HBase 的开发流程,然后介绍下公司 CDH 集群,介绍下 CDH 集群调优监控。最后分享两个生产案例。第一代离线数仓是在去年三月份上线,主要是基于 OMS 和 WMS,由于分库分表,大约有十几个库。前期通过 SQOOP 进行数据抽取,后来由于 SQOOP 的一些问题采用了阿里开源的...转载 2019-05-05 16:05:24 · 1390 阅读 · 0 评论