Elasticsearch high disk watermark 问题

当Elasticsearch遇到highdiskwatermark报警,表明磁盘空间不足,可能导致数据无法写入。解决办法是清理磁盘空间或通过API暂时关闭磁盘使用检查。Elasticsearch的cluster.routing.allocation.disk-watermark配置参数用于控制磁盘使用水位,超过设定值会阻止新分片分配。可以通过动态更新这些设置来调整策略。
摘要由CSDN通过智能技术生成

https://my.oschina.net/u/2242064/blog/493565

今天发现logstash没有任何数据写入elasticsearch,检查logs,发现报错high disk watermark [10%] exceeded on [asfasdf112xzvdx][flag=smasher] free:2.8gb[9.2%], shards will be relocated away from this node.

原因可能是机器剩余磁盘空间不足,低于elasticsearch的shard设置,没办法了删除部分没用的数据就可以了。

另外可以在shell用命令关闭这个检查

curl -XPUT localhost:9200/_cluster/settings -d '{

    "transient" : {

        "cluster.routing.allocation.disk.threshold_enabled" : false

    }

}'

Elasticsearch使用两个配置参数决定分片是否能存放到某个节点上。cluster.routing.allocation.disk.watermark.low:控制磁盘使用的低水位。默认为85%,意味着如果节点磁盘使用超过85%,则ES不允许在分配新的分片。当配置具体的大小如100MB时,表示如果磁盘空间小于100MB不允许分配分片。cluster.routing.allocation.disk.watermark.high:控制磁盘使用的高水位。默认为90%,意味着如果磁盘空间使用高于90%时,ES将尝试分配分片到其他节点。上述两个配置可以使用API动态更新,ES每隔30s获取一次磁盘的使用信息,该值可以通过cluster.info.update.interval来设置。

  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值