HBase MemStore刷写

最新推荐文章于 2024-05-31 11:48:00 发布

木良Duncan

最新推荐文章于 2024-05-31 11:48:00 发布

阅读量115

点赞数

分类专栏： Hbase 文章标签： hbase java 数据库

本文链接：https://blog.csdn.net/qq_45275284/article/details/129808307

版权

15 篇文章 0 订阅

订阅专栏

在这里插入图片描述

MemStore刷写时机：

当某个memstore的大小达到 hbase.hregion.memstore.flush.size（默认值 128M），其所在region的所有memstore都会刷写。
当 memstore 的大小达到了
hbase.hregion.memstore.flush.size（默认值 128M）*hbase.hregion.memstore.block.multiplier（默认值 4）
时，会阻止继续往该 memstore 写数据。
当 region server 中 memstore 的总大小达到 java_heapsize *hbase.regionserver.global.memstore.size（默认值 0.4） hbase.regionserver.global.memstore.size.lower.limit（默认值 0.95）， region 会按照其所有 memstore 的大小顺序（由大到小）依次进行刷写。直到 region server 中所有 memstore 的总大小减小到上述值以下。当 region server 中 memstore 的总大小达到 java_heapsizehbase.regionserver.global.memstore.size（默认值 0.4）时，会阻止继续往所有的 memstore 写数据。
到达自动刷写的时间，也会触发 memstore flush。自动刷新的时间间隔由该属性进行配置 hbase.regionserver.optionalcacheflushinterval（默认 1 小时）。
当 WAL 文件的数量超过 hbase.regionserver.max.logs，region 会按照时间顺序依次进行刷写，直到 WAL 文件数量减小到 hbase.regionserver.max.log 以下（该属性名已经废弃，现无需手动设置，最大值为 32）。

关注