ES报错“Result window is too large”参悟大数据思维

       ES在数据搜索上提供了强大支持,但其耗费内存代价也是巨大的。因为第一次使用ElasticSearch,在做分页的时候没有注意,分页插件显示了最后一页,今天做压测,单台es的数据达到2亿数据,每页显示20条的情况下需要500万页。


      直接点第500万页的时候出现了“Result window is too large”报错,搜索一下网络,原来ES设置了默认最大窗口数量index.max_result_window为10000,完全是为了提高搜索速度,有些解决方法直接加大该参数值:

curl -XPUT http://localhost:9200/indexName/_settings -d '{ "index" : { "max_result_window" : 10000000}}'


       但随着系统数量逐渐增加,该问题任然会出现,ES之所以作为强大的数据搜索引擎,主打功能在于其搜索能力,并不是为了查询所有数据列表,查看了一下百度的分页显示也是如此,第一次只显示10页,点击下一页的时候显示接下来的4页,列表的排序是按照ES的评分机制来的,评分高的优先显示,是而不会将所有数据页显示,这样就能够满足用户需求,想象一下,基本不会有一个用户会点到数据的最后一页的。
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值