ElasticSearch集群宕机总结

最新推荐文章于 2024-07-29 14:00:55 发布
最新推荐文章于 2024-07-29 14:00:55 发布
阅读量2.4k 收藏 1
点赞数
文章标签： 大数据
原文链接：https://juejin.im/post/5b4d5572e51d4562b31a6332
版权

灾难描述：

通过错误日志分析：超长关键词模糊查询触发lucene内部错误，导致整个集群全部宕机

灾难恢复面临问题

    1. 重启整个集群
    1. 打开被close的索引
      POST */_open
    1. 查看集群健康状态
      GET _cat/health 集群状态RED
    1. 查看索引分片状态
      GET _cat/shards 商品索引2号shard主副分片全部UNASSIGNED，提供的服务的数据只有60%

灾难恢复方案

灾难恢复

重建商品索引，重导全量数据

灾难总结及预防方案

weixin_33726313
关注
Elasticsearch】es 模糊查询导致Elasticsearch服务宕机
九师兄
05-17 1951
1.概述 转载：模糊查询导致Elasticsearch服务宕机 之前我在社区里写过 《ElasticSearch集群故障案例分析: 警惕通配符查询》一文，讲的是关于通配符查询可能引起ES集群负载过高的问题。 当时提到wildcard query构造的non-deterministic automaton要经历一个determinize的过程，其间如果生成的状态数量过高，可能引起集群负载彪高，影响对外服务。 但因为determinize的过程中，Lucene对生成的状态数量做了限制，因此在问题查询过去以后，.
【ElasticSearch 集群】Linux安装ElasticSearch集群（图文解说详细版）
编码人生
10-02 1500
上次我们讲了linux环境安装ElasticSearch这次我们来将一下ElasticSearch的集群安装安装es的前置条件：这次我们安装的是版本，所以我们安装。
Elasticsearch 单机集群配置 与 宕机模拟
...
07-08 1489
单机集群配置 1. 集群安装 下载 elasticsearch 解压并把目录改名为 es, 复制两份, 第一份 es1, 第二份 es2 wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-6.3.0.tar.gz tar -zxf elasticsearch-6.3.0 mv elasticse...
一次ES集群崩溃及恢复过程
最新发布
SYN_ACK的博客
07-29 1122
生产环境上搭建了一套由Filebeat + Kafka + Logstash + Elasticsearch + Kibana实现的实时日志分析系统。每一台生产服务器上利用Filebeat收集指定的应用日志，作为生产者写入到Kafka中；另一端Logstash作为消费者消费Kafka中的消息，并上报到ES集群中，最终通过Kibana展示日志消息。我们的生产集群一共七台机器专用于运行Elasticsearch集群，其中六台内存大小为62G,一台内存大小为128G。
elasticsearch零宕机切换索引
xiao1122的专栏
05-15 340
我们在用es做搜索查询，经常会遇到数据需要重建索引的情况，生产环境如果在不影响业务的前提下来重建索引呢？，其实es已为我们提供了解决方案，通过es的别名机制能很容易的实现索引的平滑切换。 具体实现方法如下： 1.为老索引建立别名 PUT /old_index/_alias/my_inde 2.建立新索引new_index 3.重跑old_index的数据到new_index 4.数据重跑完成后，切换索引 POST /_aliases{ “actions”: [ { “remove”: { “index”:
Elasticsearch宕机问题
weixin_30367169的博客
06-08 752
个人博客:https://blog.sharedata.info/ Elasticsearch 突然宕机,每次重启都只生成错误日志报错信息:## There is insufficient memory for the Java Runtime Environment to continue.# Native memory allocation (mmap) failed to map...
elasticsearch3台服务器集群
02-27
根据研究和咨询公司大佬 本人搭建的生产环境运行的es集群配置文件，版本6.5.4，操作系统是CentOS7.6 3台es做成的集群，亲测可用。 只需要更改集群名称和每台节点的名称即可使用。
ES集群节点宕机导致shard unassigned解决方案
热门推荐
一路踩坑一路成长
12-15 1万+
ES集群概况： 1台master节点，4台data节点，9个shards 问题： 一台data节点宕机，导致5个分片处于unassigned状态，集群状态变为red,无法自动rerouting 解决步骤： 1.查看所有节点的日志信息，通过日志，我们发现master节点中出现了警告信息，通知宕机节点的磁盘利用率超过了90%，这也是导致节点宕机，集群出现unassigned的原因。 2.找到
ElasticSearch 集群
qq_16681279的博客
11-13 514
一、ElasticSearch 集群 1.1 搭建集群 Elasticsearch如果做集群的话Master节点至少三台服务器或者三个Master实例加入相同集群，三个Master节点最多只能故障一台Master节点，如果故障两个Master节点，Elasticsearch将无法组成集群.会报错，Kibana也无法启动，因为Kibana无法获取集群中的节点信息。 由于，我们使用只有一台虚拟机，所以我们在虚拟机中安装三个ES实例，搭建伪集群，而ES启动比较耗内存，所以先设置虚拟机的内存3G和CPU个数4
Elasticsearch集群：集群及相关概念
session_t的博客
08-22 737
Elasticsearch集群：集群及相关概念
模糊查询导致Elasticsearch服务宕机
东境物语
01-09 804
之前我在社区里写过《ElasticSearch集群故障案例分析: 警惕通配符查询》一文，讲的是关于通配符查询可能引起ES集群负载过高的问题。 当时提到wildcard query构造的non-deterministic automaton要经历一个determinize的过程，其间如果生成的状态数量过高，可能引起集群负载彪高，影响对外服务。 但因为determinize的过程中，Lucene对生...
Elasticsearch集群搭建并实现数据同步
Candy_Sir的博客
03-23 1301
Elasticsearch集群搭建并实现数据同步 集群搭建 先从单机版开始吧。单机版的搭建详见这篇博客，个人觉得写的很不错。 至于集群，那就把单机版复制三份，改改配置，依次启动就好了。 2.Logstash实现mysql同步数据到elasticsearch Logstash集成详见这篇文章 关键配置 input { jdbc { #数据库连接地址 jdbc_co...
es 集群的重启
weixin_42816196的博客
03-08 6304
文章目录一、 es 11.关闭集群的动态分片：（动态分片开启状态如果节点宕机了，会导致集群重新分配数据进行数据转移，会导致节点直接大量传输数据）2. 查看进程和杀死进程3.重启 服务4.确认进程是否启动5.开启集群的动态分片：6.检查集群的健康状态 一、 es 1 1.关闭集群的动态分片：（动态分片开启状态如果节点宕机了，会导致集群重新分配数据进行数据转移，会导致节点直接大量传输数据） curl ...
ElasticSearch集群
weixin_45546279的博客
12-22 352
ES集群 1.为什么需要集群 1)单点故障 2)高并发 3)海量数据 2.ES集群相关概念 ES 的1个集群中放多个节点，放多个shard(shard又分成主的shard和从shard) ES cluster(1)—Node()-Shard() ES节点类型Node有三种节点: master Node:主节点,维护集群信息 索引库操作 data node:数据节点, 文档crud client...
纪实:嵌入式Elasticsearch服务因为gc无法释放内存,导致宕机事件
constanine_xia的专栏
02-09 3552
场景描述我们电商服务中使用了Elasticsearch嵌入式服务,然后再一次错误代码提交后,导致elasticsearch服务检索了大量数据使得内存无法释放,最后服务发生stop-the-world,宕机了原因解析网上查询可能是因为Elasticsearch服务的gc高占用引起的,所以就开分析日志，分析命令为:cat xxx.log |grep "INFO elasticsearch\[estor...
实例展示elasticsearch集群生态,分片以及水平扩展.
weixin_33940102的博客
11-30 259
　　elasticsearch用于构建高可用和可扩展的系统。扩展的方式可以是购买更好的服务器(纵向扩展)或者购买更多的服务器（横向扩展）,Elasticsearch能从更强大的硬件中获得更好的性能，但是纵向扩展也有一定的局限性。真正的扩展应该是横向的，它通过增加节点来传播负载和增加可靠性。对于大多数数据库而言，横向扩展意味着你的程序将做非常大的改动来利用这些新添加的设备。对比来说，Elastics...
Elasticsearch分片本质与集群的故障转移
LIUUUU
02-15 633
分片简介 primary shard：主分片，提升系统存储容量，通过主分片将数据分布在所有节点上，主分片可以将一个索引的数据分散在多个数据节点上，从而实现数据存储的水平扩展。主分片数在索引创建的时候指定，后续不能修改，如果需要修改则需要重建索引 replica shard：副本分片，提高数据可用性，一旦主分片丢失，副本分片可以晋升成为主分片。副本分片可以动态调整。如果不设置副本分片，一旦节点出现故...
ElasticSearch集群宕机，重启后某个索引状态为red
u010483897的博客
07-27 1373
问题现象： es集群宕机重启后，某个索引不能正常使用； 问题原因： 因服务器磁盘爆了，导致es集群宕机； 解决方案： 1- 查看所有分片状态 curl -X GET "http://ip:port/_cat/shards" 应该可以看出不能使用的那个索引，主备分片全部处于unsigend状态。 2-直接在kibana执行下面指令，对集群中分配失败的索引进行重新分配 POST /_cluster/reroute?retry_failed=true 3-执行后，过一会执行下这一句看下结.
ES使用记录
天涯倦客的博客
11-01 1211
es记录 docker安装es kibana安装 IK分词器 springboot整合es
后端服务向elasticsearch发送数据，如果elasticsearch宕机，是否会对后端服务造成影响
07-14
如果 Elasticsearch 宕机，后端服务向其发送的数据将无法成功存储和索引。这可能会对后端服务造成一些影响，具体取决于后端服务的实现和依赖于 Elasticsearch 的程度。 以下是一些可能的影响： 1. 数据丢失：如果后端服务在 Elasticsearch 宕机期间继续产生数据，并且没有其他备份或存储机制，那么这些数据可能会丢失。 2. 请求超时或错误：如果后端服务在尝试将数据发送到 Elasticsearch 时遇到连接问题或请求超时，它可能会等待一段时间并重试，这可能导致请求堆积和延迟。如果后端服务没有处理这些错误情况，它可能会返回错误响应或无法正常工作。 3. 数据流处理中断：如果后端服务依赖于 Elasticsearch 的实时数据流处理功能（如使用 Elasticsearch 的实时搜索或聚合功能），当 Elasticsearch 宕机时，它将无法继续获取最新的数据更新，并可能导致数据展示或处理的不准确性。 为了应对 Elasticsearch 宕机的情况，可以考虑以下策略： 1. 引入高可用性：部署多个 Elasticsearch 实例并设置为集群，以确保在一个实例宕机时仍然能够提供服务。 2. 数据备份与恢复：定期进行 Elasticsearch 数据的备份，以便在宕机后能够恢复数据。 3. 错误处理与重试机制：在后端服务中实现适当的错误处理和重试机制，以处理与 Elasticsearch 连接和请求相关的问题，并在可能的情况下进行故障恢复。 4. 记录日志与监控：通过记录日志和设置监控，及时发现 Elasticsearch 宕机和其他相关问题，并能够采取相应的措施。 综上所述，Elasticsearch 的宕机可能会对后端服务造成影响，但通过采取适当的策略和措施，可以减轻这些影响并提高系统的可靠性和弹性。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值