谈谈在Elasticsearch遇到建index的坑

最新推荐文章于 2022-04-22 10:15:36 发布
最新推荐文章于 2022-04-22 10:15:36 发布
阅读量3.7k 收藏
点赞数
分类专栏： Linux 文章标签： elasticsearch 脚本
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/viewsite/article/details/78736891
版权


简要提纲： 

es在建index超过一定数量时，会遇到建index特别慢的问题，建一个index需要好几分钟，分析源码后发现 建index过程中，有一个遍历所有shard的过程 disk relocation ，包含两层for循环，非常的耗时，把这个设置关闭后，建index变得迅速起来

viewsite
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Elasticsearch 使用过程中有哪些坑？教你避开这些坑
wenyusuran的专栏
01-03 1486
0、题记 Elastic中文社区和各种Elastic爱好者交流群中会遇到形形色色的问题。 来自运维球友讨论的真实线上吐槽问题总结： 问题1：开发不规范。 我们这边es 都是我们在推,很多开发不会用或者用的不规范！ 问题2：不管性能，用起来再说！ 场景1：我们这边开发只要work，管他wildcard，能模糊就好，管他内存，windows size死命地设，不管多...
es-head Elasticsearch的可视化操作插件
12-19
es-head是一个针对Elasticsearch的可视化操作插件。它提供了一个便捷的操作工具，可以连接Elasticsearch搜索引擎，并提供可视化的操作页面，对Elasticsearch进行各种设置和数据检索功能的管理。 es-head 插件可以在...
elasticsearch使用总结以及使用过程中的坑
weixin_37970049的博客
07-10 2669
who:谁发明了它 就是下面这位大哥 Shay Banon What:elasticsearch是什么 elasticsearch开源并且免费(很关键)的全文检索和分析的引擎，可以快速存储，搜索数据，还可以科学的分析数据 然额，elasticsearch本质上就是一个分布式的数据库，允许多台服务器协同工作，每台服务器可以运行多个elasticsearch实例,单个的elasticsea...
elasticsearch索引问题解决记录
upupup_every的博客
04-14 3333
问题： DEV UAT环境es重启后无法提供服务，如图： 排查过程： 1、进入容器内查看整体健康信息 如上图，集群健康状态为yellow，其中unassigned_shards指标，代表已经在集群状态中存在的分片，但是实际在集群里找不到的，应当进入集群查看索引及分片信息 2、进入容器后查看索引健康信息 es问题索引健康状态显示为yellow: ｛"status" : "yellow"｝ 问题索引，由于测试环境es为单节点，副本数应当...
Elasticsearch使用Index（）方法刷新数据的一些小坑
逝水流年染轻尘的博客
11-20 3865
问题 我们在使用spring-data-elasticsearch中的ElasticsearchTemplate类中的index方法去更新 elasticsearch数据库中的同样数据的时候，如果你发现了index()方法之后发现数据是增加了， 而不是更新了数据库中原来的那条数据，而是多了一条数据，原来的老数据还在，那么你可以看下你 的es实体类中是否设置了id,version,如果设置了，那就...
ELK（三）Elasticsearch Index名称动态生成规则
ying_521125的博客
04-22 546
ELK（三）Elasticsearch Index名称动态生成规则 使用环境在 Java Spring 环境中 SPEL 动态生成 Index 使用目的：对于数据量大的需要按天分 index ,因此需要采用动态生成 Index 1、生成 Index 规则 @Component("indexNameGenerator") public class IndexNameGenerator { public String testIndex() { //根据日期生成index
elasticsearch7.17.11版本分词器插件安装包
11-13
Elasticsearch（简称ES）是一款基于Lucene的分布式、RESTful搜索引擎，广泛应用于日志收集、数据分析等领域，是ELK（Elasticsearch、Logstash、Kibana）堆栈的重要组成部分。在处理中文数据时，合理的分词对于提升...
在CentOS系统上安装Elasticsearch流程
最新发布
05-07
附件是在CentOS系统上安装Elasticsearch流程，文件绿色安全，请大家放心下载，仅供交流学习使用，无任何商业目的！
2、Elasticsearch创建和获取Index
天行健，君子以自强不息；地势坤，君子以厚德载物。
06-01 308
阅读文本大概需要3分钟。《简单的ECharts数据可视化，30分钟学会》点赞结束，Leo加下我的微信。上篇使用讲解了创建Document的的两种方式，这篇讲解剩下的两种方...
ElasticSearch操作Index
书香水墨
02-09 1354
一、创建Index同时设置mapping\settings PUT 'localhost:9200/index1' { "settings": { "number_of_shards": 6, "number_of_replicas": 1, "refresh_interval": "10s", "translog":{ "flush_threshold_size":"1gb", "sync_interval":"30s", "dur
开始使用Elasticsearch (1): 如何创建index，添加、删除、更新文档
aben_sky的专栏
05-22 1540
本文内容来自 https://blog.csdn.net/UbuntuTouch/article/details/99481016 ，有删减和文字修正。 ...
【ElasticSearch】ElasticSearch的索引操作
Blank的博客
03-13 346
目录 一、参考资料 二、索引（Index） 1. 创建索引 2. 获取索引 3. 删除索引 三、映射（Mappings） 1. 设置映射 2. 获取映射 一、参考资料 参考文档：https://www.elastic.co/guide/en/elasticsearch/reference/current/index.html 这里建议入门之后，看看官方文档，因版本号不同，有些地方与自己学习的资料有所出入。 本文内容，基于ElasticSearch7.11版本。 二、索引..
Elasticsearch 性能监控2（五种常见问题的解决办法）
客人
06-14 3836
前言：本文为es性能监控基础的扩展，大家可以先看下性能监控基础，熟悉下es的基本原理。为翻译性质文档，感谢原作者。原始文档类似于汽车的运行方式，Elasticsearch旨在让用户快速上手和运行，而无需了解其所有的内部工作。然而我们在使用过程中，总会遇到这样那样的问题。下文将介绍Elasticsearch使用时经常遇到的一些挑战，以及我们如何应对这些挑战。一、我的es集群是红色或者黄色的，我该如何...
elasticsearch报错：org.elasticsearch.index.engine.DocumentMissingException:document missing
a414903057的博客
12-17 1万+
elasticsearch报错：org.elasticsearch.index.engine.DocumentMissingException:document missing 通过查询资料，发现是生产上的es集群间的通信出现问题，导致不同es上的数据不一致，在执行更新es数据操作时，会报es找不到该document 将通信有问题的es停掉，再执行更新操作，es就不会报错了
Elasticsearch - 查询数据时 index_not_found_exception 解决办法
热门推荐
BigManing的博客
09-18 2万+
文章目录1、背景2、问题分析3、解决办法4、indicesOptions 说明 转载请标明出处： http://blog.csdn.net/qq_27818541/article/details/108671948 本文出自:【BigManing的博客】 1、背景 我这里的索引是按天建立的，在查询多索引的时候报错: Suppressed: org.elasticsearch.client.ResponseException: method [POST], host [http://127.0.0.1:9
org.elasticsearch.index.query.QueryShardException: failed to find geo_point field [geo]错误原因
邱健的博客
11-26 4276
报错意思是 错误的找不到 geo_point 类型， 名字叫做 geo 的字段 先从我创建索引说起。 1：用插件创建个名为 amap 的索引，里面的 mappings 都是为空的 { "state": "open", "settings": { "index": { "creation_date": "1606375206078", "number_of_shards": "5", "number_of_replicas": "1", "uuid": "yxZUNDh_TH6u0TbS...
Elasticsearch
残影的博客
05-22 1281
Elasticsearch一、Elasticsearch概述1.1 Elasticsearch的概念1.2 全文搜索引擎1.3 Elasticsearch And Solr1.4 Elasticsearch Or Solr二、Elasticsearch入门2.1 Elasticsearch安装2.2 Elasticsearch基本操作2.2.1 RESTful2.2.2 客户端安装2.2.3 数据格式2.2.4 HTTP 操作2.2.4.1 索引操作 一、Elasticsearch概述 1.1 Elas
org.elasticsearch.index.engine.DocumentMissingException
学习 记录 总结 分享
07-16 1868
今天更新ES 突然后台报了错误 org.elasticsearch.index.engine.DocumentMissingException: [_na][_na] [null][null]: document missing at cn.fsdjaa.module.elasticsearch.facade.container.$.handleIOException($.java:248) at cn.fsdjaa.module.elasticsearch.facade.container.$.inv
es 创建索引报错_python 处理ES时 删除已有的索引后仍报该索引存在?报错-问答-阿里云开发者社区-阿里云...
weixin_39867142的博客
12-21 570
在python脚本下对获取到的json 内容存入es中，已经在try部分删除该索引名称的内容，然后再重新创建，但编译会提示该索引已经存在，进而无法往es中存入数据。代码如下：conn=ES(['******'],bulk_size = 10000,timeout = 20)try:conn.indices.delete_index('aa')except:passconn.indices.crea...
如何在 Python 中使用 Elasticsearch 获取index的详情
05-16
使用 Python Elasticsearch 客户端可以轻松地获取 Elasticsearch index 的详情。以下是一个简单的代码示例： ```python from elasticsearch import Elasticsearch # 创建 Elasticsearch 客户端 es = Elasticsearch() # 获取所有 index 名称 indices = es.indices.get_alias("*").keys() # 遍历每个 index 并获取详情 for index in indices: index_detail = es.indices.get(index) print(index_detail) ``` 这段代码会首先创建一个 Elasticsearch 客户端，然后使用 `es.indices.get_alias("*").keys()` 获取所有的 index 名称。接着，遍历每个 index 名称并使用 `es.indices.get(index)` 获取 index 的详情。最后打印 index 的详情。 你需要根据自己的 Elasticsearch 配置对 `Elasticsearch()` 的参数进行适当的设置。另外，还需要安装 Elasticsearch Python 客户端（`pip install elasticsearch`）。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值