2013年02月_杨步涛的博客

12月 11月 10月 09月 08月 07月 06月 05月 04月 03月 02月 01月

原创 hbase 手动split region的patch

在对Region进行手工split的过程中，出现以下异常./hbase org.apache.hadoop.hbase.util.RegionSplitter -r lsmp_lottery_presplit HexStringSplitException in thread "main" java.lang.IllegalArgumentException: Wrong FS:

2013-02-25 17:50:18 5453 1

原创 HBase的hbase.rpc.timeout参数引起的问题

在高并发压力测试时，发现对一个reginserver做scan操作的时，regionserver中偶尔会输出下面的错误：2013-02-21 09:50:33,328 WARN org.apache.hadoop.ipc.HBaseServer: IPC Server listener on 60020: readAndProcess threw exception java.io

2013-02-25 17:32:23 15216 1

原创关系型数据库的主备的一致性问题

对于数据库的主备切换的一致性问题大致有以下几种方式：a、集群方式，如oracle的rack，缺点是比较复杂b、共享SAN存储方式，相关的数据文件和日志文件都放在共享存储上，优点是主备切换时数据保持一致，不会丢失，但由于备机有一段时间的拉起，会有短暂的不可用状态c、主备进行数据同步的方式，常见的是日志的同步，可以保障热备，实时性好，但是切换时，可能有部分数据没有同步过来，带来了数据的一致

2013-02-23 10:15:36 3343

原创关于Hbase客户端和regionserver之间的单连接

利用Hbase的客户端进行Get或者scan操作时，在regionserver端用netstat -anp|grep 60020时，发现每一个Hbase客户端只有一个和该regionserver的连接，无论hbase client是否开启了多个线程进行并发操作。后来翻了一下源码，果然是这样的。参见下面的源码截图，对同一个目的地的RegionServer来说，connection只有一

2013-02-17 17:45:27 5387