elasticsearch有默认内容搜索长度，有请求延迟，以及分页查询的个人总结

最新推荐文章于 2024-01-16 15:40:34 发布
最新推荐文章于 2024-01-16 15:40:34 发布
阅读量668 收藏
点赞数
文章标签： elasticsearch 搜索引擎 java
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_48804275/article/details/124931196
版权
本文探讨了在Spring Boot 2.2.5和Elasticsearch 7.6环境中，如何处理默认搜索限制和延迟问题。当未设置查询大小时，默认返回10条数据，可通过设置检索长度实现更多数据的获取，注意最大值为10000。为即时查询新增数据，需了解Elasticsearch的1s刷新间隔，并使用手动刷新来确保可见性。此外，分享了如何实现原生分页查询，并强调了处理分页时的注意事项。
摘要由CSDN通过智能技术生成

elasticsearch的默认内容搜索长度

  • springboot版本2.2.5，elasticsearch7.6版本
  • 对elasticsearch数据进行全局搜索，我没设置查询的大小，但是默认数据只有十条，下边是没有设置检索长度的代码。请指教！
    在这里插入图片描述
  • 有的业务场景希望把所有数据查出来，且不分页，解决办法就是设置检索长度(这里一般都是结合分页搜索，如果不分页，直接输入查询长度，最大为10000)
    在这里插入图片描述

elasticsearch的请求延迟

  • 业务场景，在添加了一条数据后需要马上调用了查询接口，查询刚才添加的数据。
  • 遇到的问题，添加请求成功，切数据也添加成功，但是执行搜索请求的时候没有数据
  • 原因，elasticsearch在执行index请求后，会有一个默认1s的刷新等待时间，此时search请求是不可见的
  • 解决办法，在执行请求后手动设置刷新，此时马上调用search请求就会有结果
    在这里插入图片描述

elasticsearch的分页查询

  • 分页查询的表示
//分页
sourceBuilder.from(pageFrom);//从什么时候开始
sourceBuilder.size(pageSize);//每页查询数据数量
  • 但是就用es原生的分页是不行的，需要自己手动处理一下，源码如下，这样就能实现分页了
    在这里插入图片描述
    学无止境，热爱计算机，请指教！
YouYouoooooo
关注
Elasticsearch技术解析与实战
modouwu的博客
09-23 638
启动发现当Elasticsearch节点启动时，它会尝试连接到配置中的种子节点列表中的每个节点。如果节点是首次启动或需要加入一个新的集群，它会通过种子节点列表来发现集群中的其他节点。Ping操作节点之间通过Ping操作来确认彼此的存在和状态。Elasticsearch会定期向集群中的其他节点发送Ping请求，以检测节点是否仍然在线。构建集群视图通过Ping操作，每个节点都能构建出集群的完整视图，包括集群中所有节点的信息。
Elasticsearch 常见面试题
yellow_violet的博客
07-12 1556
ES 是什么？ES 中的 集群、节点、分片是什么？倒排索引是什么？ES 的底层 存储原理？...
java 反序列化 php数据
luck_h的博客
01-26 642
org.sction phprpc 3.0.2 /** * 对象: StringInt */public static StringInt object(String content){ PHPSerializer p = new PHPSerializer(); StringInt t = null; try { t = (StringInt)
学习提高：spring-data-elasticsearch-4.0.9数据刷新策略RefreshPolicy使用，Elasticsearch数据延迟解决方案
做技术，贵在学习与坚持！
06-28 2335
【学习提高】spring-data-elasticsearch-4.0.9数据刷新策略RefreshPolicy使用，Elasticsearch数据延迟解决方案
elasticsearch 更新延迟问题
weixin_45251189的博客
03-22 1185
在给elasticsearch插入新值之后，立即再次请求数据，发现刚刚新增的数据查不出来，才知道elasticsearch有更新延迟问题，据说是为了提升性能。 解决此问题可以加上这句代码： request.setRefreshPolicy(WriteRequest.RefreshPolicy.IMMEDIATE); ...
es mysql延迟_elasticsearch 索引延迟 一致性问题等
weixin_36009861的博客
02-03 292
https://www.elastic.co/guide/en/elasticsearch/guide/current/near-real-time.htmlhttps://www.elastic.co/guide/en/elasticsearch/reference/1.4/_modifying_your_data.htmlhttps://www.elastic.co/guide/en/elas...
Elasticsearch 2.4.2 低延迟使用记录
禅鸣之时
05-30 418
   编写不易，转载请注明（ http://shihlei.iteye.com/blog/2423848 ）！   一 概述 （一直没有升级ES版本，这里只记录使用这一年多的一些优化结论）   Elasticsearch2.4.2  做索引库，提供低延迟的查询需求。 业务规模：docuement 规模 90万，大概200M，不算大。 查询特点：都是terms查询，没有聚合查询...
ElasticSearch-Kafka-RabbitMQ
weixin_73241486的博客
04-04 1127
Elasticsearch 是基于 Lucene 的 Restful 的分布式实时全文搜索引擎， 每个字段都被索引并可被搜索，可以快速存储、搜索、分析海量的数据。Kafka是分布式发布-订阅消息系统是一个可划分的，冗余备份的持久性的日志服务，它主要用于处理流式数据。组件:主题(Topic)：Kafka主题是一堆或一组消息。生产者(Producer)：在Kafka，生产者发布通信以及向Kafka主题发布消息。消费者(Consumer)：Kafka消费者订阅了一个主题，并且还从主题中读取和处理消息。
面试题之ElasticSearch
最新发布
HC_MM的博客
01-16 1371
重新自己整理过后的es相关面试题，这里包括八股文和之前面试遇到的问题，后续会持续更新~
Elasticsearch故障诊断常用方法
qq_27639777的博客
05-20 1478
文章目录背景使用Profile API定位慢查询1. Query2. Rewrite Time3. Collectors使用[Explain API](https://www.elastic.co/guide/en/elasticsearch/reference/current/search-explain.html)分析未分配的分片（Unassigned Shards）诊断未分配的主分片诊断未分配的副分片诊断已分配的分片节点CPU使用率高节点内存使用率高bulk队列Netty缓冲indexing buff
Elastic：在 Elasticsearch 中计算摄取延迟并存储摄取时间以提高可观察性
Elastic 中国社区官方博客
06-19 1136
使用 Elasticsearch 查看和分析数据时，通常会看到可视化效果以及监视和警报解决方案，这些解决方案利用了在远程/受监视系统上生成的时间戳。但是，使用远程生成的时间戳可能会有风险。 如果远程事件的发生与到达 Elasticsearch 的事件之间存在延迟，或者如果远程系统上的时间设置不正确，则重要事件可能会在雷达的扫描之外而不被发现。因此，在将文档摄取到 Elasticsearch 中时，存储每个文档的摄取时间以及监视每个事件到达 Elasticsearch 集群需要多长时间通常会很有帮助。大于正
elasticsearch依据字段长度过滤
热门推荐
www.hohode.com
04-29 1万+
查询title字段的长度小于9的文档GET /nm*/_search { "query": { "filtered": { "query": { "match": { "title": { "query": "黄晓明和杨颖结婚", "operator": "
Elasticsearch：在 Elasticsearch 中计算摄取延迟并存储摄取时间以提高可观察性
Elastic 中国社区官方博客
03-06 611
使用查看和分析数据时，经常会看到使用在远程/受监控系统上生成的时间戳的可视化、监控和警报解决方案。但是，使用远程生成的时间戳可能存在风险。如果远程事件的发生与事件到达 Elasticsearch 之间存在延迟，或者如果远程系统上的时间设置不正确，那么重要事件可能会被忽视。因此，在将文档摄取到 Elasticsearch 时，存储每个文档的摄取时间以及监控每个事件到达 Elasticsearch 集群所需的时间通常很有帮助。大于正常摄取延迟可能表示摄取过程存在问题或远程系统上的时间设置存在问题。
es查询某个字段长度大于多少
fangletian1981的专栏
03-11 1万+
{ "query": { "bool": { "filter": { "regexp": { "content": { "value": ".{1000,}" } } } } } }
ElasticSearch（四）：查询
qq_33506353的博客
01-25 1032
介绍ES的基本查询操作，以及过滤查询、聚合查询。
ElasticSearch优化方案
Xyulu的博客
08-06 1174
文章目录前言一、硬件优化二、分片策略1、合理修改分片数2.读入数据总结 前言 项目性能测试的时候存在每条任务都有百万数据量入库的情况，ES入库速度较慢，导致Kafka消息堆积，需要提升入库速率，如下为参考收集整理的内容。 一、硬件优化 使用SSD代替机械硬盘 使用多块硬盘 （Elasticsearch 通过多个 path.data 目录配置） 当前服务器使用的均是1T的SSD且暂不支持使用多块硬盘 二、分片策略 1、合理修改分片数 建议：集群节点的个数 <= 分片个数 <=
ES常见问题(1)-解决ElasticSearch每次只能返回10条数据
m0_52887673的博客
01-16 1万+
ES常见问题(1)-解决ElasticSearch每次只能返回10条数据
ES设置最大查询条数限制，打破限制，聚合分组数量限制打破
桂秋拾貳
11-09 4299
​ 今天在做进行查询的时候发现，在进行分页的时候，数据超出10000以后得页数，查询的时候会报错。后查询了es官方文档发现，查询数量的默认值是10000；官网链接：https://www.elastic.co/guide/en/elasticsearch/reference/7.8/index-modules.html#dynamic-index-settings。
Elasticsearch聚合查询实现分页优化
总结来说，Elasticsearch的聚合后分页主要是通过在查询源构建器中设置`from`和`size`参数来实现的。在实际应用中，结合`bucket_sort`或在客户端处理分页结果可以进一步优化性能。同时，如果已知总页数，可以避免查询...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值