关于elasticsearch 输出默认限制最多一万条记录的问题

最新推荐文章于 2024-08-20 09:09:43 发布
最新推荐文章于 2024-08-20 09:09:43 发布
阅读量1.1w 收藏 10
点赞数
分类专栏： Elasticsearch 文章标签： Elasticsearch
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_29756665/article/details/87910901
版权

      es默认输出最多一万条，因公司数据量较大，需要调高限制数量，查阅相关资料将限制调大后，暂时解决了问题，但是过了几天再查发现又是10000条限制，且看 配置参数已经调大了。

研究后发现，已经调大的参数设置是之前的索引，但新建的索引需要重新设置：

PUT 索引名称-*/_settings?preserve_existing=true
{
  "index.max_result_window" : "10000000"
}

如果想对所有索引设置，需将索引名称改为：_all

es版本：6.0

 

andrew_CS
关注
专栏目录
【es】使用ElasticSearch的44条建议 性能优化
九师兄
05-26 3821
1.概述 转载：使用ElasticSearch的44条建议 建议去看原文，这里是防丢失 在搜索业务上摸爬滚打3年，使用的Es版本也从1.x升级到了5.x，扮演的角色也逐渐从Es的使用方变为维护方，这里大致汇总了使用Es过程中踩的一些坑以及一些注意事项，也会穿插一下我们的解法。 01 — es中建索引是指创建一个保存数据的目录，用于保存倒排索引，索引创建之后是不可变的（Immutable），只允许新增字段。 因为lucene中field是带类型的，不同类型的字段进入倒排索引后会经过压缩，long/int/.
Elasticsearch 使用java分页查询条数超过1w的解决办法 -search_after方式
ssdlleave的专栏
11-30 3420
1.需求：job跑批每隔5分钟查询es数据取出并进行推送。 问题：原使用java分页查询es。当大于1w时无法取出后续数据造成了数据丢失。 使用scroll_id查询性能消耗太大不适应此场景. es调用测试： 获取第一次查询结果后设置sort， 查询首条数据为 转换成java实现方式如下： BillTraceElasticSearchRepository findInfoDocByScroll public Map<Object[],List<BillT
Elasticsearch输出默认限制最多一万条记录
qq_44066412的博客
11-19 4298
关于elasticsearch输出默认限制最多一万条记录的问题 现象: ES默认返回数据量为10000条，当分页的from超过10000条的时候，es就会如下报错：Result window is too large, from + size must be less than or equal to:[10000] but was 原因： 当索引非常非常大(千万或亿)，是无法按照from + size做深分页的，因为分页越深则越容易OOM，即便不OOM，也是很消耗CPU和内存资源的。官方在后2.x版本中已
es查询条数超过10000问题
最新发布
yanzi920403的博客
08-20 209
【代码】es查询条数超过10000问题。
修改设置elasticsearch一次查询的最大数据量
*** 喵桑_Rachel ***
01-07 4912
es默认查询的最大数量为10000条 当超过一万条数据时会抛出异常，这是我们需要修改最大查询数量，如下： PUT summary_index/_settings?preserve_existing=true { "max_result_window":"200000000" }
elasticsearch(一) 设置最大返回条数
chen649053473的博客
04-02 1万+
curl -XPUT http://127.0.0.1:9200/rtiaes/_settings -d '{ "index" : { "max_result_window" : 2147483647}}' 注意： 1.size的大小不能超过index.max_result_window这个参数的设置，默认为10,000。 2.需要搜索分页，可以通过from size组合来进行。from表示...
elasticsearch设置最大返回条数
xuexin736的博客
05-05 2676
有两种方法：一.可以通过url设置，方便快捷不用重启。如下：curl -XPUT ‘http://127.0.0.1:9200/logs_default/_settings’ -d ‘{ “index” : { “max_result_window” : 2000000}}’注意：1.size的大小不能超过index.max_result_window这个参数的设置，默认为10,000。2.需要搜...
Elasticsearch设置最大返回条数
weixin_44455388的博客
08-18 6402
需求： elasticsearch默认输出最多一万条 查询第10001条数据开始就会报错：Result window is too large, from + size must be less than or equal to 但是很多时候10000数据不能满足项目的需求，所以我们就要解除这个限制。 参数设置： 下面我们通过Elasticsearch的API设置最大的读取行。 注：Elasticsearch支持的最大值是2^31-1，也就是2147483647。 验证： 下面我们来查看一下是否设置成功：
【Elasticsearch只查询10000条数据解决方案】
哎呦，码鸭的博客
11-24 2099
解决Elasticsearch默认条数限制查询 Elasticsearch官方讲解 在Elasticsearch中默认限制索引查询最多只能查询10000条数据，查询的条数超出这个值就会报错但是莫得慌，通过阅览了网友们的众多说法以及ES官方的资料得知，影响查询的是该配置 max_result_window，我们都知道很多时候10000数据不能满足项目的需求，因此我们需要自己来设置这个默认值。 解决方案： 方案①在kibana中创建索引时加上该设置 “settings”:{ "index":{ "max_
ElasticsearchRestTemplate 查询结果固定只有一万条
Dolphin_bobo的博客
09-14 2152
ElasticsearchRestTemplate 查询结果固定只有一万条 背景问题解决1、设置es允许返回的最大值2、不同查询方式设置a、restapib、java代码 背景 springboot2.3.2.release spring-boot-starter-data-elasticsearch2.3.2.release estemplate.search 根据es进行批量查询时，返回的数据只有1万条 问题 es查询带有分页功能，默认返回1万条 解决 1、设置es允许返回的最大值 { "ind
Java ElasticSearch面试题
qq_42872034的博客
03-01 1558
最新的 Java 面试题，技术栈涉及 Java 基础、集合、多线程、Mysql、分布式、Spring全家桶、MyBatis、Dubbo、缓存、消息队列、Linux…等等，会持续更新。
Elasticsearch from+size 超过10000结果解决方法
热门推荐
星辉Johnson的博客
12-06 4万+
方法一： 如果需要搜索分页，可以通过from size组合来进行。from表示从第几行开始，size表示查询多少条文档。from默认为0，size默认为10，  如果搜索size大于10000，需要设置index.max_result_window参数  注意：size的大小不能超过index.max_result_window这个参数的设置，默认为10,000。  PUT _se
ES-es-ElasticSearch:打破默认取回10条，scroll连续取回
weixin_33834075的博客
04-13 4904
import random import json import datetime import time from pymongo import MongoClient from pymongo import MongoClient, ASCENDING, UpdateOne, InsertOne, DeleteOne, ReplaceOne from pymongo.error...
Elasticsearch解决只能查询10000条数据方案
weixin_39641746的博客
10-12 1万+
es官方默认限制索引查询最多只能查询10000条数据，查询第10001条数据开始就会报错，Result window is too large, from + size must be less than or equal to 但是很多时候10000数据不能满足项目的需求。 解决方案： 第一种办法.在kibana中执行,解除索引最大查询数的限制 put _all/_settings { “in...
ES 聚合查询的结果默认显示10条？
qqqq0199181的博客
08-14 3万+
问题 对ES做一次聚合查询返回的查询结果中只显示10个词项，如何才能够将所有的词项都显示出来？ { "query": { "bool": { "must": [ { "range": { "passtime": { "gt": "1490976000000&qu
ES返回值数量超过10000条解决方式
zhanghytc的博客
07-17 3万+
现象 ES默认返回数据量为10000条， 当分页的from超过10000条的时候，es就会如下报错： Result window is too large, from + size must be less than or equal to:[10000] but was [10500]. See the scroll api for a more efficient way to r...
SpringData Elasticsearch 方法名查询默认查询10条的问题
applebomb的专栏
10-11 2996
使用方法名来构建查询，曾经一直使用的好好的，突然有发现查询出来的记录不符合了。怎么查询也只有10条匹配，突然想到可能ES查询引擎本身的限制，一查果然是。 https://knowledgebase.progress.com/articles/Article/ElasticSearch-returns-only-the-first-10-results https://www.elastic.co/guide/en/elasticsearch/reference/6.3/search-request-fr
es解决只能默认查询10000条数据方案
初夏0811的博客
09-04 2万+
在使用es进行数据查询时，由于es官方默认限制了索引一次性最多只能查询10000条数据，这其实是es的一种保护机制，那么很多时候我们需要突破这种限制，例如需要进入数据同步的场景，则需要查询全部的数据，如何处理呢？通过上面方案，即可实现突破Es官方限制的只能查询前10000条的限制。_all表示所有索引，针对单个索引的话修改成索引名称即可。
Elasticsearch设置查询数量的限制
wangsaidi的博客
08-14 4742
Elasticsearch设置查询数量的限制 PUT /索引名/_settings { "index.max_result_window": "10000" #默认为10000，可以设置为任何大小 }
springboot项目es一次最多查询多少条
05-24
在Spring Boot项目中使用Elasticsearch进行查询时，一次最多查询多少条取决于多个因素，如Elasticsearch集群的资源、查询条件、索引数据量等。通常情况下，建议不要一次查询太多条，以避免对Elasticsearch集群的性能造成过大的负担。 一般来说，可以通过设置Elasticsearch的分页参数来控制一次查询的数量。默认情况下，Elasticsearch会返回10条数据，可以通过设置size参数来调整每页返回的数量，例如： ``` POST /_search { "from": 0, "size": 20, "query": { // 查询条件 } } ``` 以上示例中，每次查询最多返回20条数据。根据实际情况，可以根据业务需求和Elasticsearch集群的性能状况来调整查询的数量。
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值