elaseticSearch搜索每次搜索的结果会变动的问题修改

最新推荐文章于 2024-03-15 22:34:24 发布
最新推荐文章于 2024-03-15 22:34:24 发布
阅读量707 收藏
点赞数
分类专栏： es 文章标签： es
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/onlyonexhj/article/details/80420651
版权

每次通过es搜索相同的查询语句，但是搜索出来的结果排序会变动

原因是，查询语句没有设置 type.

java客户端改动如下：

将 searchRequestBuilder = client.prepareSearch(INDEX).setQuery(getQuery(page))
 .setPostFilter(buildFilter(page))

        .setFrom(page.getFirst() - 1).setSize(page.getPageSize());

改成：

 searchRequestBuilder = client.prepareSearch(INDEX).setTypes(TYPE).setQuery(getQuery(page))
 .setPostFilter(buildFilter(page))

 .setFrom(page.getFirst() - 1).setSize(page.getPageSize());

问题完美解决


onlyonexhj
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
ES 查询不稳定现象及解决方案
温染的笔记
04-16 4433
在 ES 查询过程中，有时会发现：对于相同的查询语句，ES 返回不同的查询内容，但我们需要的是稳定的返回结果，此时该如何解决这个问题呢？
elasticsearch——搜索条件一样，返回结果顺序不一样
qq_26915707的博客
02-24 2598
现在遇到两种情况，分情况分析一下 1.得分不同 如果因为最后结果的得分不同，所以排序的时候有先后的话，需要加search_type参数 /_search?search_type=dfs_query_then_fetch 详情可以参考： https://www.jianshu.com/p/c7529b98993e 2.得分相同 当得分相同，各种排序条件相同的记录会随机排序，尤其是...
elasticsearch相同两次搜索出现不一样的结果
qq_24223291的博客
11-05 7687
集群情况下，elasticsearch出现前后两次搜索结果不一致的原因是：两次查询并不是同一分片进行处理的。 在我们理解中，同样是4号分片，主分片和副分片数据都是一致。但是当分别用这两个分片去查时，就会发现搜索结果不一致，_score不一样。在官方文档中，提到分片中存在标记为已删除的文档，这些文档只有在下一次旧文档所属的段合并时才会从磁盘中删除。但是出于实际原因，这些已删除的文档会被考虑用于索引...
【问题解决】ElasticSearch分页查询时数据顺序错乱/不一致的问题
iaoyou1的博客
05-15 1548
number_of_replicas：分片拥有多少个副本，需要部署到不同的节点上（就比如没有其它节点但是设置数量大于0的话，服务器会提示warning）ElasticSearch中索引可能是由多个分片构成的，并且每个分片可能拥有多个副本，其对应的设置时索引建立时的设置。利用关键字的hashcode，让相同查询条件作用到同一个分片上，保证每次输出结果一致，并在一定程度上保证查询效率。使用ElasticSearch分页查询时，每次输入同样的分页参数以及查询条件，得到的结果不一致的问题。
理解“query then fetch”和“dfs query then fetch”
hebeind100的博客
01-26 745
查询的代码： $ curl -XGET localhost:9200/startswith/test/_search?pretty -d '{ "query": { "match_phrase_prefix": { "title": { "query": "d", "max_ex.
ES7基础篇-08-搜索(匹配,过滤，布尔，高亮，排序)
Alan0517
04-01 4277
查询，代表的是这条记录与搜索内容匹配的怎么样，除了决定这条记录是否匹配外，还要计算这条记录的相关分数。这个和咱们平时的查询是一样的，比如我们搜索一个关键词，分词以后匹配到相关的记录，这些相关的记录都是查询的结果，那这些结果谁排名靠前，谁排名靠后呢？这个就要看匹配的程度，ES的搜索结果是按照相关分数的高低进行排序的，因为在搜索的过程中，会计算这个分数。过滤，代表的含义非常的简单，就是YES or NO，这条记录是否匹配查询条件，在ES的搜索当中，分为两种，一种计算分数，而另外一种是不计算分数的。
分词我个人用于elaseticsearch添加词库用.zip
07-29
在IT领域，尤其是在自然语言处理（NLP）和搜索引擎优化（SEO）中，分词是一项至关重要的技术。本文将深入探讨“分词”这一概念，以及如何将其应用于Elasticsearch，同时结合提供的压缩包文件信息进行解析。 首先，...
elasticsearch-jdbc 同步工具下载及配置说明
11-14
通过正确配置和使用Elasticsearch-JDBC，你可以方便地将关系型数据库中的数据整合到Elasticsearch中，充分利用其搜索和分析能力。同时，也要注意监控和调整同步过程，以确保系统的稳定性和性能。
ElasticSearch安装包_win
07-13
**Elasticsearch：分布式搜索引擎与分析引擎** Elasticsearch 是一款功能强大的开源搜索引擎，由Java编写，基于Apache Lucene库，旨在提供实时、分布式的搜索和分析能力。它以其高效、可扩展和易于使用的特性在...
es相同条件搜索多次返回结果不一样
不会敲代码的皮皮今的博客
03-18 5938
1. 背景介绍 业务方发现他们配置的数据源会返回重复数据,主要体现为在翻页的时候上一页的最后一个数据和下一页的第一条数据一模一样, 场景和分页问题极其相似 2. 分析过程 我最开始碰到这个bug的时候,就真的是以为只是翻页的问题,现象太容易引人误会了. 结果我肉眼从接口到代码到排查代码传参都没问题. 于是决定预发环境DEBUG,发现参数确实传输中没有问题,那么代码问题就被排除,只可能是基建问题. 于是我拿到真正执行的DSL, 直接去es中搜索, 发现同一条DSL,短时间诶查询的结果不一样. (注意:
elasticsearch 每次查询结果不一样
王大呀呀的博客
03-03 2905
这种情况一般都是出现在集群中，目前已知会有两种可能： 1.就是主副分片的数据不一致，es 查询默认情况下会随机选择分片或者其副本，所以导致同样的查询结果不一致。此情况产生的原因复杂，默认情况下，写入数据时，会先写入主分片，主分片成功后，再并发写入副本分片，当所有副本分片成功后，才会返回成功。所以要找出数据不一致的原因并解决，这种情况我没遇到过。 2.我遇到的是第二种情况，因为我的集群中的两个节点的 ik 配置不一致导致了这种结果，所以要保证各节点的 es 和插件的配置一致。 ...
es每次结果不一样_Elasticsearch搜索结果返回不一致问题
weixin_29531989的博客
12-30 3882
一、背景这周在使用Elasticsearch搜索的时候遇到一个，对于同一个搜索请求，会出现top50返回结果和排序不一致的问题。那么为什么会出现这样的问题？后来通过百度和google，发现这是因为Elastcisearch的分布式搜索特性导致。Elasticsearch在搜索时，会循环的选择主分片和其副本中的一个来计算和返回搜索结果，而由于主分片和副本中相关统计信息的不同，从而导致了同一个搜索串的...
es查询主分片副本分片造成es每次查询结果不一致问题
qq_35640866的博客
06-16 829
java的调用接口：client.prepareSearch(“index”).setPreference(“_primary”)。指定_primary 或者_primary_first(线上优先选择这个) 防止每次在主分片和从分片轮训结果不一致。elasticsearch可以使用preference参数来指定分片查询的优先级。
Elasticsearch相同两次搜索出现不一样的结果
不见其长，日有所长
11-20 2226
1. 原因 主要的原因是因为有副本(replica)的存在，主分片和副本分片可能不一致，导致最终在主分片和副本分片上计算得到的得分不同，而导致最终的查询结果不一致。 但是是如何造成主分片和副本分片不一致的情况，可能是因为用户删除了部分文档，之后主分片进行了merge， 而副本分片没有进行merge。 这种情况下主分片和副本分片上的总文档数量就会不同，打分时计算出的IDF的值不同，最终得到了不同的得分。 2. 解决办法 解决方式就是在查询时指定preference, 可以指定为_primary、_replic
ES 多次查询结果不一致，有哪些可能？
最新发布
qq_33999844的博客
03-15 1639
ES的搜索应用场景非常丰富，在极端情况下可能会出现同语句多次查询结果不一致的情况，特别是全文检索有打分的场景下。 一般ES如果碰到同一个语句多次查询结果不一致的情况（数量不一致/顺序不一致），一般是如下几种case...
es不同查询方法的比较
Areigninhell的博客
01-23 1051
from elasticsearch import Elasticsearch from elasticsearch import helpers gol_index_name = "索引名称" es_client = Elasticsearch(["ip"], http_auth=('用户名', '用户名密码'), port=9200) es_search_options = {"query"...
Elasticsearch数据查询排序问题
m0_67401920的博客
04-18 2029
Elaticsearch 在查询数据会导致数据查询返回顺序不正确 推测原因: 1. es 查询时, 在大数据量下es评分是基于当前分片的词频进行计算, 指定search_type参数设置基于索引的词频进行计算评分. searchtype 类型说明: 1. query then fetch（默认的搜索方式） 基于当前分片 2. DFS query then fetch 基于索引 2. es 查询时, 基于当前查询结果进行重新评分排序 在查询之后调用 rescore , 对查询结果进行重新评分, 此处可以
ES顺序问题
weixin_44857939的博客
06-15 158
1、使用局部有序mq顺序写入es。结果查询es出现乱序。
关于elasticsearch排序不准问题可能的解决方案
06-12 7602
作为未使用过es新手，前两天接到排查搜索接口价格排序不准确的任务，紧锣密鼓的配好本地环境开始调试，看来看去一句排序： $params['body']['sort']['goods_price'] = ['order' => "asc"]; 也查了官方文档，没毛病啊。无奈强制转换字段类型，又是打印各种参数，折腾好久，还是没有用！ 下班吃饭时候想到mapping的数据类型，第二天回到公...
springboot2 如何整合 elaseticsearch8.4 的java client端？ 带ca 认证
04-28
要整合 Elasticsearch 8.4 的 Java Client 端，需要使用 Elasticsearch 官方提供的 Java High Level REST Client。下面是整合步骤： 1. 在 pom.xml 中添加 Elasticsearch Java High Level REST Client 的依赖： ```xml <dependency> <groupId>org.elasticsearch.client</groupId> <artifactId>elasticsearch-rest-high-level-client</artifactId> <version>8.4.0</version> </dependency> ``` 2. 在 application.yml 中配置 Elasticsearch 的连接信息和 CA 认证信息： ```yaml spring: data: elasticsearch: cluster-name: elasticsearch cluster-nodes: node1:9200,node2:9200 properties: es.net.ssl.truststore.location: /path/to/truststore.jks es.net.ssl.truststore.password: password ``` 其中，`cluster-nodes` 是 Elasticsearch 集群节点列表，`es.net.ssl.truststore.location` 是 CA 证书的路径，`es.net.ssl.truststore.password` 是 CA 证书的密码。 3. 创建 Elasticsearch 的配置类，用于配置 Elasticsearch 的连接信息： ```java @Configuration @EnableElasticsearchRepositories(basePackages = "com.example.repository") public class ElasticsearchConfig extends AbstractElasticsearchConfiguration { @Value("${spring.data.elasticsearch.cluster-name}") private String clusterName; @Value("${spring.data.elasticsearch.cluster-nodes}") private String clusterNodes; @Override public RestHighLevelClient elasticsearchClient() { final ClientConfiguration clientConfiguration = ClientConfiguration.builder() .connectedTo(clusterNodes) .usingSsl(getSSLContext()) .build(); return RestClients.create(clientConfiguration).rest(); } private SSLContext getSSLContext() { try { KeyStore truststore = KeyStore.getInstance("jks"); truststore.load(new FileInputStream(new File("/path/to/truststore.jks")), "password".toCharArray()); TrustManagerFactory trustManagerFactory = TrustManagerFactory.getInstance(TrustManagerFactory.getDefaultAlgorithm()); trustManagerFactory.init(truststore); SSLContextBuilder builder = SSLContexts.custom().loadTrustMaterial(truststore, null); SSLContext sslContext = builder.build(); return sslContext; } catch (Exception e) { throw new RuntimeException(e); } } } ``` 其中，`elasticsearchClient` 方法用于创建 Elasticsearch 的客户端，`getSSLContext` 方法用于加载 CA 证书。 4. 在使用 Elasticsearch 的 Repository 时，注入 ElasticsearchTemplate 对象，并在构造函数中传入 Elasticsearch 的配置信息： ```java @Repository public class MyElasticsearchRepositoryImpl implements MyElasticsearchRepository { private final ElasticsearchTemplate elasticsearchTemplate; public MyElasticsearchRepositoryImpl(ElasticsearchTemplate elasticsearchTemplate) { this.elasticsearchTemplate = elasticsearchTemplate; } // ... } ``` 这样就完成了 Elasticsearch 8.4 Java Client 端的整合，同时也支持了 CA 认证。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值