集群写入_es 7.2 生产集群 index 无数据写入故障定位

博客内容涉及Logstash在尝试写入Elasticsearch时遇到400错误,原因是ES集群达到了默认的最大分片限制4000。通过调整Elasticsearch集群设置,将`max_shards_per_node`参数增大到10000,成功解决了数据写入异常的问题,恢复正常索引操作。
摘要由CSDN通过智能技术生成

Logstash报错: Could not index event to Elasticsearch_懵懂无知的蜗牛的博客-CSDN博客

集群写入_es 7.2 生产集群 index 无数据写入故障定位_镝不咸的博客-CSDN博客

查看 logstsh 日志报错提示如下

Could not index event to Elasticsearch. {:status=>400, :action=>["index", {:_id=>nil, :_index=>"apps_wms-2020.07.16", :routing=>nil, :_type=>"_doc"}, #<:event:0x682b3a66>], :response=>{"index"=>{"_index"=>"apps_wms-2020.07.16", "_type"=>"_doc", "_id"=>nil, "status"=>400, "error"=>{"type"=>"illegal_argument_exception", "reason"=>"Validation Failed: 1: this action would add [2] total shards, but this cluster currently has [4000]/[4000] maximum shards open;"}}}}

es  集群默认有分片限制最大 4000 ,导致 logstash 写入 es 的 index 数据异常

调整 es 集群默认分片限制 index写入恢复正常

PUT /_cluster/settings{  "transient": {    "cluster": {      "max_shards_per_node":10000    }  }}
eee77da7876dd2414c0c5ee1b3ff4b78.png

 

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值