ElasticSearch查询大于10000条的数据

注: 部分概念介绍来源于网络

在使用es进行数据查询时,由于es官方默认限制了索引一次性最多只能查询10000条数据,查询第10001条数据开始就会报错,
错误的内容大致为:

Result window is too large, from + size must be less than or equal to:[10000] but was [10500]. See the scroll api for a more efficient way to requestlarge data sets. This limit can be set by changing the[index.max_result_window] index level parameter

方案1:在设置索引属性时解除索引最大查询数的限制

put _all/_settings
{
“index.max_result_window”:20000
}
_all表示所有索引,针对单个索引的话修改成索引名称即可

方案2:修改集群配置config/elasticsearch.yml 文件
增加如下配置

max_result_window: 20000

方案3:在创建索引的时候加上

“settings”:{
“index”:{
“max_result_window”: 20000
}
}

如果这样设置完毕之后还不行,这时候需要在API中添加一行代码:

searchSourceBuilder.trackTotalHits(true);

如果是使用kibana等工具的dsl语句,可以参考下面编写

GET 索引名/_search
{
“query”: {
“match_all”: {}
},
“track_total_hits”:true
}

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值