springboot整合elasticsearch解决无法查询1万条以上数据问题

修&罗

已于 2022-07-04 23:06:36 修改

阅读量3.5k

点赞数 2

分类专栏： elasticsearch 文章标签： java eclipse

于 2022-04-11 15:20:02 首次发布

本文链接：https://blog.csdn.net/ZWJie107067619/article/details/124099666

版权

elasticsearch 专栏收录该内容

2 篇文章 0 订阅

订阅专栏

本文档介绍了在SpringBoot 2.3.12版本中集成Elasticsearch的相关步骤，包括添加依赖、设置索引、调整最大返回数，并提供了相关curl命令示例，如修改索引设置、查看索引配置、查询数据总量以及删除数据。同时，文章提及了Java代码中进行的相应改造，以解决查询大量数据的问题。

摘要由CSDN通过智能技术生成

springboot版本是2.3.12.RELEASE，不同版本间处理方式有稍许差异，以下方法供大家参考，同版本下亲测有效，请按顺序执行：

<dependency>
	<groupId>org.springframework.boot</groupId>
	<artifactId>spring-boot-starter-data-elasticsearch</artifactId>
	<version>${springboot.version}</version>
</dependency>

hzinfor_fx2为索引名称，这个索引名称是项目的，大家记得修改

curl -H "Content-Type: application/json" -XPUT 127.0.0.1:9200/hzinfor_fx2/_settings -d '{"index.blocks": {"read_only_allow_delete": null}}'

curl -H "Content-Type: application/json" -XPUT 127.0.0.1:9200/hzinfor_fx2/_settings -d '{"index.max_result_window":"200000"}'

在输入此命令前，先了解curl的使用方法，-H 'Content-Type:application/json' 这个是必输的，因为默认是表单提交格式，不然会报格式错误

第二就是-d '{"index.max_result_window":"200000"}' 这个单双引号一定要注意， -d后面是单引号

第三就是index.blocks 这个属性，把true改为空就行了，接着就有修改最大返回数的权限了。

查看索引下配置

curl -XGET 127.0.0.1:9200/hzinfor_fx2/_settings

查看索引下数据总量

curl -s -XGET 'http://127.0.0.1:9200/_cat/indices/hzinfor_fx2?v' | awk -F ' ' {'print $7'} | grep -v docs.count

上面是对es进行的一些设置，java代码同样需要进行改造

设置 "track_total_hits":true

以上就可以完美解决无法查询出一万条以上数据的问题。

删除索引下某条数据命令

curl -H "Content-Type: application/json" -XPOST 127.0.0.1:9200/hzinfor_fx2/_delete_by_query -d '{"query":{"match":{"_id" : "i20220208-f8vfaie8ph4lqfnltq"}}}'