- 博客(2)
- 收藏
- 关注
原创 海量数据下HBase的读性能
这段时间刚做完一个hbase项目,存储千亿规模的数据,12台dell,5小时完成扫库。 这里主要是对hbase的数据本地化机制作了优化,本文不对细节作描述。 在后期使用的过程中,使用方发现hbase的随机读性能出现了较大的下降,经常出现单个 GET请求花费3-5秒的现象。这个事情困扰了我很久,因为从我的实验环境上是不可复现的。 实验环境和线上环境的主要区别是数据量和写压力: 实验环境百...
2011-08-04 13:01:42
280
原创 HBase bug:重启机群后不能正常工作
现象: hbase机群重启后不能正常工作,通过web接口访问时,500 Exception的样子。hbase hbck显示很多region没有被服务。 重现过程: 某些情况下下,比如系统压力比较大,或者master意外kill掉了,master会被快速重启。 这个时候region server是正常的,region server会通过zookeeper感知这个事件,并将master切换...
2011-08-04 11:44:04
156
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人