hbase scan超时设置_HBase Scan Timeout-OutOfOrderScannerNextException

最近迁移数据时需要执行大Scan，HBase集群经常碰到以下日志:Exception in thread "main" org.apache.hadoop.hbase.DoNotRetryIOException: Failed after retry of OutOfOrderScannerNextException: was there a rpc timeout?

出现上述日志后这次Scan就挂了，HBase Client不能自动恢复了。下面分析一下相关代码。

客户端Scan示例如下：Scan scan = new Scan();

scan.setStartRow(...);

scan.setStopRow(...);

scan.setCaching(20);

Result result;

try (ResultScanner rs = table.getScanner(scan)) {

while ((result = rs.next()) != null) {

// deal with result

}

}table.getScanner(scan)做了什么:

初始化一个ScannerCallable对象，调用call()，这个call()会发送一个特殊的ScanRequest rpc请求给

数据所在的RS(定位RS的过程不在本文讨论范围)，RS收到请求后发现request中没有scanner id，认为这是一个全新的Scan请求，RS会分配一个该RS全局唯一的scanner id，这个id会返回给客户端供这个Scan后续的ScanRequest使用。同时会为这个scan分配一个数据迭代器RegionScannerImpl(具体取数据逻辑看HBase Sca