2021SC@SDUSC HBase(十四)项目代码分析——WAL生命周期

2021SC@SDUSC

一、简述

WAL的生命周期主要包括WAL的写入、滚动、失效和删除

二、WAL写入

WAL写入详解

三、WAL滚动

通过wal日志切换，这样可以避免产生单独的过大的wal日志文件，这样可以方便后续的日志清理(可以将过期日志文件直接删除)另外如果需要使用日志进行恢复时，也可以同时解析多个小的日志文件，缩短恢复所需时间。
wal触发切换的场景有如下几种：

1. SyncRunner线程在处理日志同步后，如果有异常发生，就会调用requestLogRoll发起日志滚动请求

 protected final void requestLogRoll(final WALActionsListener.RollRequestReason reason) {
   
    // If we have already requested a roll, don't do it again
    // And only set rollRequested to true when there is a registered listener
    if (!this.listeners.isEmpty() && rollRequested.compareAndSet(false, true)) {
   
      for (WALActionsListener i : this.listeners) {
   
        i.logRollRequested(reason);
      }
    }
  }

2. SyncRunner线程在处理日志同步后, 检查当前在写的wal的日志大小是否超过配置{hbase.regionserver.hlog.blocksize默认为hdfs目录块大小}*{hbase.regionserver.logroll.multiplier默认0.95}，超过后同样调用requestLogRoll发起日志滚动请求

public static final String WAL_ROLL_MULTIPLIER = "hbase.regionserver.logroll.multiplier";

private boolean isOutstandingSyncsFromRunners() {