- 博客(6)
- 资源 (2)
- 收藏
- 关注
原创 使用hbase hbck修复region中数据不一致问题
[hbase版本1.1.2][hbase@kmr-5b9c18fc-gn-7198aa8e-client-1-001 ~]$ ll -ttotal 788-rw-r--r--. 1 hbase hadoop 60614 Dec 27 18:22 20171227_8th_After_fixAssgnmentOf_should_end_with_an_empty_key_FORte
2017-12-28 21:37:22 18914
原创 使用happybase执行scan()报错RetriesExhaustedException解决
python脚本# encoding: utf-8import os, timeimport sysimport happybaseCURRENT_DIR = os.path.abspath(os.path.dirname(__file__))sys.path.insert(0, CURRENT_DIR + "/../")HBASE_HOST = "172.30.1.20
2017-12-26 11:48:31 4799
原创 hadoop2.7执行离线备份hbase根目录时报错Mismatch in length
[hdfs@hmaster-1 root]$ hadoop distcp hdfs://hdfs-ha/apps/hbase/data hdfs://hdfs-ha/backup/hbase_bk_20171222出现的错误摘要:Caused by: java.io.IOException:Mismatch in length of source:hdfs://hdfs-ha/apps
2017-12-22 22:51:50 984
原创 《大数据架构详解》读后感
《大数据架构详解》 ——读后感作者:朱洁 罗华霖出版商:中国工信出版社 电子工业出版社版次:2016年10月第1版印数:7001 ~ 12000册定价:69.00元本书花了大量笔墨讲了通信运营商的大数据应用案例及其使用的架构,这也不奇怪,因为作者是为通信运营商做大数据解决方案的。作者服务的运营商大数据平台架构,从上到下依次为———应用层 SQM、CSE、MSS、DMP,这些都是运营商特有的...
2017-12-21 20:51:50 2773
原创 记一次RegionServer节点的宕机事故[hbase1.1.2]
我们的大数据部署在金山云,hbase集群中的进程RegionServer(RS)死掉以后不会自动启动,只能手动拉起。因此我写了个定时监控脚本,一旦监测到RS死掉就立即启动,以保证故障节点能持续提供hbase数据读/写服务。立即启动的好处是不对其他RS造成过大压力,因为一个节点的RS死掉后,hmaster就会把此Region Server管理的region分配给其他健康的Region Server(...
2017-12-15 22:10:41 2165
原创 解决某个RegionServer获取行锁失败[HBase1.1.2]
【现象】某个RegionServer的日志中,发现有以下异常:2017-12-13 03:19:33,953 WARN [B.fifo.QRpcServer.handler=0,queue=0,port=16020] regionserver.HRegion: Failed getting lock in batch put, row=F680A8D4CF43A6CC66507589B8
2017-12-14 18:12:30 2593
[案例]从冷备份的hdfs数据中恢复到原来的hbase表
2018-04-08
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人