第04讲：HTTP操作之ElasticSearch高级查询

最新推荐文章于 2023-11-10 12:54:28 发布
最新推荐文章于 2023-11-10 12:54:28 发布
阅读量872 收藏
点赞数
分类专栏： ElasticSearch 文章标签： elasticsearch http 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qzc70919700/article/details/128567092
版权

3.1.4、高级查询

Elasticsearch 提供了基于 JSON 提供完整的查询 DSL 来定义查询
定义数据 :

# POST /student/_doc/1001
{
	"name":"zhangsan", 
	"nickname":"zhangsan", 
	"sex":"男",
	"age":30
}
# POST /student/_doc/1002
{
	"name":"lisi", 
	"nickname":"lisi", 
	"sex":"男", 
	"age":20
}
# POST /student/_doc/1003
{
	"name":"wangwu", 
	"nickname":"wangwu", 
	"sex":"女",
	"age":40
}
# POST /student/_doc/1004
{
	"name":"zhangsan1", 
	"nickname":"zhangsan1", 
	"sex":"女",
	"age":50
}
# POST /student/_doc/1005
{
	"name":"zhangsan2", 
	"nickname":"zhangsan2", 
	"sex":"女",
	"age":30
}

在这里插入图片描述

实验1：查询所有文档

在 Postman 中，向 ES 服务器发 GET 请求 :http://127.0.0.1:9200/student/_search

{
	"query": {
		"match_all": {}
	}
}
# "query":这里的query代表一个查询对象，里面可以有不同的查询属性
# "match_all":查询类型，例如:match_all(代表查询所有)，match，term，range等等
# {查询条件}:查询条件会根据类型的不同，写法也有差异

在这里插入图片描述

{
	"took【查询花费时间，单位毫秒】" : 1116, 
	"timed_out【是否超时】" : false, 
	"_shards【分片信息】" : {
		"total【总数】" : 1, 
		"successful【成功】" : 1, 
		"skipped【忽略】" : 0, 
		"failed【失败】" : 0
	},
	"hits【搜索命中结果】" : {
		"total"【搜索条件匹配的文档总数】: {
		"value"【总命中计数的值】: 3,
		"relation"【计数规则】: "eq" # eq 表示计数准确， gte 表示计数不准确
	},
	"max_score【匹配度分值】" : 1.0, 
	"hits【命中结果集合】" : [
	...
	]
}
实验2：匹配查询

match 匹配类型查询，会把查询条件进行分词，然后进行查询，多个词条之间是 or 的关系
在 Postman 中，向 ES 服务器发 GET 请求 :http://127.0.0.1:9200/student/_search

{
	"query": {
		"match": {
			"name":"zhangsan"
		}
	}
}

在这里插入图片描述

实验3：多字段匹配查询

multi_match 与 match 类似，不同的是它可以在多个字段中查询。
在 Postman 中，向 ES 服务器发 GET 请求 :http://127.0.0.1:9200/student/_search

{
	"query": {
	   "multi_match": {
	       "query": "zhangsan",
	       "fields": ["name","nickname"]
		} 
	}
}

在这里插入图片描述

实验4：关键字精确查询

term 查询，精确的关键词匹配查询，不对查询条件进行分词。
在 Postman 中，向 ES 服务器发 GET 请求 :http://127.0.0.1:9200/student/_search

{
	"query": {
	   "term": {
	     "name": {
	       "value": "zhangsan"
	     }
		} 
	}
}

在这里插入图片描述

实验5：多关键字精确查询

terms 查询和 term 查询一样，但它允许你指定多值进行匹配。 如果这个字段包含了指定值中的任何一个值，那么这个文档满足条件，类似于 mysql 的 in 在 Postman 中，向 ES 服务器发 GET 请求 :http://127.0.0.1:9200/student/_search

{
	"query": {
	   "terms": {
	     "name": ["zhangsan","lisi"]
		} 
	}
}

在这里插入图片描述

实验6：指定查询字段

默认情况下，Elasticsearch 在搜索的结果中，会把文档中保存在_source 的所有字段都返回。 如果我们只想获取其中的部分字段，我们可以添加_source 的过滤
在 Postman 中，向 ES 服务器发 GET 请求 :http://127.0.0.1:9200/student/_search

{
  "_source": ["name","nickname"],
  "query": {
  	"terms": {
    	"nickname": ["zhangsan"]
	} 
 }
}

在这里插入图片描述

实验7：过滤字段

我们也可以通过：

  • includes：来指定想要显示的字段
  • excludes：来指定不想要显示的字段

在 Postman 中，向 ES 服务器发 GET 请求 :http://127.0.0.1:9200/student/_search

{
  "_source": {
  	"includes": ["name","nickname"]
  },
  "query": {
  "terms": {
     "nickname": ["zhangsan"]
   }
 } 
}

在这里插入图片描述
在 Postman 中，向 ES 服务器发 GET 请求 :http://127.0.0.1:9200/student/_search

{
  "_source": {
    "excludes": ["name","nickname"]
  },
  "query": {
  "terms": {
     "nickname": ["zhangsan"]
   }
} }

在这里插入图片描述

实验8：过滤字段

bool把各种其它查询通过must(必须 )、must_not(必须不)、should(应该)的方式进行组合
在 Postman 中，向 ES 服务器发 GET 请求 :http://127.0.0.1:9200/student/_search

{
	"query": {
		"bool": {
			"must": [
				{
					"match": {
					"name": "zhangsan"
					}
				}
			],
			"must_not": [
				{
				"match": {
					"age": "40"
					} 
				}
			],
			"should": [
				{
				"match": {
					"sex": "男" 
					}
				} 
			]
		} 
	}
}

在这里插入图片描述

实验9：范围查询

range 查询找出那些落在指定区间内的数字或者时间。
range 查询允许以下字符

操作符说明
gt大于>
gte大于等于>=
lt小于<
lte小于等于<=

在 Postman 中，向 ES 服务器发 GET 请求 :http://127.0.0.1:9200/student/_search

{
	"query": {
		"range": {
			"age": {
				"gte": 30,
				"lte": 35 
			}
		} 
	}
}

在这里插入图片描述

实验10：模糊查询

返回包含与搜索字词相似的字词的文档。
编辑距离是将一个术语转换为另一个术语所需的一个字符更改的次数。这些更改可以包括:

  • 更改字符(box → fox)
  • 删除字符(black → lack)
  • 插入字符(sic → sick)
  • 转置两个相邻字符(act → cat)

为了找到相似的术语，fuzzy 查询会在指定的编辑距离内创建一组搜索词的所有可能的变体或扩展。然后查询返回每个扩展的完全匹配。
通过 fuzziness 修改编辑距离。一般使用默认值 AUTO，根据术语的长度生成编辑距离。
在 Postman 中，向 ES 服务器发 GET 请求 :http://127.0.0.1:9200/student/_search

{
"query": {
   "fuzzy": {
     "name": {
       "value": "zhangsan"
     }
  } 
 }
}

在这里插入图片描述
在 Postman 中，向 ES 服务器发 GET 请求 :http://127.0.0.1:9200/student/_search

{
	"query": {
	"fuzzy": {
		"name": {
			"value": "zhansan",
			"fuzziness": 2
			}
		} 
	}
}

在这里插入图片描述

实验11：单字段排序

sort 可以让我们按照不同的字段进行排序，并且通过 order 指定排序的方式。desc 降序，asc 升序。
在 Postman 中，向 ES 服务器发 GET 请求 :http://127.0.0.1:9200/student/_search

{
	"query": {
	   "match": {
	       "name":"zhangsan"
		} 
	},
	"sort": [{
	   "age": {
	       "order":"desc"
	   }
	}] 
}

在这里插入图片描述

实验12：多字段排序

假定我们想要结合使用 age 和 _score 进行查询，并且匹配的结果首先按照年龄排序，然后 按照相关性得分排序
在 Postman 中，向 ES 服务器发 GET 请求 :http://127.0.0.1:9200/student/_search

{
	"query": {
		"match_all": {}
	},
	"sort": [ {
		"age": {
			"order": "desc"
		} 
	},
	{
		"_score":{
			"order": "desc"
		}
	}]
}

在这里插入图片描述

实验13：高亮查询

在进行关键字搜索时，搜索出的内容中的关键字会显示不同的颜色，称之为高亮。
在这里插入图片描述
Elasticsearch 可以对查询内容中的关键字部分，进行标签和样式(高亮)的设置。
在使用 match 查询的同时，加上一个 highlight 属性:

  • pre_tags：前置标签
  • post_tags：后置标签
  • fields：需要高亮的字段
  • title：这里声明 title 字段需要高亮，后面可以为这个字段设置特有配置，也可以空

在 Postman 中，向 ES 服务器发 GET 请求 :http://127.0.0.1:9200/student/_search

{
	"query": {
	"match": {
	     "name": "zhangsan"
		} 
	},
	"highlight": {
	   "pre_tags": "<font color='red'>",
	   "post_tags": "</font>",
	   "fields": {
			"name": {} 
		}
	} 
}

在这里插入图片描述

实验14：分页查询

from:当前页的起始索引，默认从 0 开始。 from = (pageNum - 1) * size size:每页显示多少条
在 Postman 中，向 ES 服务器发 GET 请求 :http://127.0.0.1:9200/student/_search

{
	"query": {
		"match_all": {}
	},
	"sort": [ {
		"age": {
			"order": "desc"
		} 
	}],
	"from": 0,
	"size": 2
}

在这里插入图片描述

实验15：聚合查询

聚合允许使用者对 es 文档进行统计分析，例如取最大值、平均值等。

  • 对某个字段取最大值 max
  • 对某个字段取最小值 min
  • 对某个字段求和 sum
  • 对某个字段取平均值 avg
  • 对某个字段的值进行去重之后再取总数
  • state 聚合
    • stats 聚合，对某个字段一次性返回 count，max，min，avg 和 sum 五个指标
最大值聚合查询案例

在 Postman 中，向 ES 服务器发 GET 请求 :http://127.0.0.1:9200/student/_search

{
	"aggs":{
		"max_age":{
			"max":{"field":"age"}
		}
	},
	"size":0
}

在这里插入图片描述

最小值聚合查询案例

在 Postman 中，向 ES 服务器发 GET 请求 :http://127.0.0.1:9200/student/_search

{
	"aggs":{
		"min_age":{
			"min":{"field":"age"}
		}
	},
	"size":0
}

在这里插入图片描述

求和聚合查询案例

在 Postman 中，向 ES 服务器发 GET 请求 :http://127.0.0.1:9200/student/_search

{
	"aggs":{
		"sum_age":{
			"sum":{"field":"age"}
		}
	},
	"size":0
}

在这里插入图片描述

去重之后再取总数案例
{
	"aggs":{
		"distinct_age":{
			"cardinality":{"field":"age"}
		}
	},
	"size":0
}

在这里插入图片描述

state 聚合案例
{
	"aggs":{
		"stats_age":{
			"stats":{"field":"age"}
		}
	},
	"size":0
}

在这里插入图片描述

实验16：桶聚合查询

桶聚和相当于 sql 中的 group by 语句

  • terms 聚合，分组统计
terms 聚合，分组统计案例

在 Postman 中，向 ES 服务器发 GET 请求 :http://127.0.0.1:9200/student/_search

{
	"aggs":{
		"age_groupby":{
			"terms":{"field":"age"}
		} 
	},
	"size":0 
}

在这里插入图片描述

Java秦老师
关注
专栏目录
ES查询客户端，elasticsearch可视化工具 elasticsearch查询客户端
06-20
Elasticsearch查询客户端是用于与ES服务器通信的软件，它们提供了多种语言的API，允许开发者以编程方式执行索引、搜索、更新和删除等操作。常见的Elasticsearch客户端包括： - **Jest**：一个轻量级的Java REST...
Elasticsearch入门之Http操作（高级查询）
https://gitee.com/micai-code
02-28 1639
Elasticsearch入门之Http操作（高级查询）
Elasticsearch HTTP查询
inexaustible的博客
09-01 1282
Elasticsearch HTTP查询 条件查询 & 分页查询 & 查询排序 多条件查询 & 范围查询 全文检索 & 完全匹配 & 高亮查询 聚合查询 映射关系
ElasticSearch之HTTP映射操作和高级查询
scorpio的博客
04-18 1403
ElasticSearch之HTTP映射操作和高级查询
es一些常用的http接口命令
JAVA_HIGHNESS的专栏
12-24 5442
查询索引下所有的数据 curl -XPOST 'http://localhost:9210/index-person/person/_search?pretty' -d ' { "query": { "match_all": {} }, "size": 1 }' 根据搜索条件查询数据 curl -XPOST 'http://localhost:9210/index-room/room/...
ElasticSearch 常用的查询过滤语句
qiezikuaichuan的专栏
08-02 5937
http://www.cnblogs.com/ghj1976/p/5293250.html query 和  filter 的区别请看： http://www.cnblogs.com/ghj1976/p/5292740.html    Filter DSL   term 过滤 term主要用于精确匹配哪些值，比如数字，日期，布尔值或 not_analyzed 的字符串(未经分析的文
Spring Boot elasticsearch7.6.2基础操作：创建索引、新增数据、查询数据
04-29
在本文中，我们将深入探讨如何使用Spring Boot与Elasticsearch 7.6.2进行基本操作，包括创建索引、添加数据以及查询数据。Elasticsearch是一个强大的分布式搜索引擎，而Spring Boot是Java开发中的轻量级框架，两者...
elasql:通用SQL到Elasticsearch DSL查询转换器
04-28
通用SQL到Elasticsearch DSL查询转换器。 专为设计 地位 实验性-加入我们，骇客入侵！ 安装 npm install elasql 用法 const convert = require('elasql').convert convert('SELECT id,name FROM shop WHERE shop_id...
es:使用DSL进行Elasticsearch查询
04-13
包es提供了Elasticsearch查询DSL。 关于 不建议使用Go“点导入”，但是，如果您想在这种情况下利用点导入的表现力，我建议将此逻辑抽象为更高级别的查询功能和程序包。 我不建议直接将其点导入其他包中。 例子 丽皮...
bertsearch：使用BERT的Elasticsearch用于高级文档搜索
02-04
Elasticsearch遇见BERT 以下是求职示例：系统架构要求码头工人Docker撰写> = 入门1.下载预训练的BERT模型已发布的预训练BERT模型列表（单击以展开...）12层，隐藏768、12头，110M参数24层，1024隐藏，16头，340M参数...
ElasticSearch7.x - HTTP 操作 - 查询文档操作
最新发布
nuanua的博客
11-10 670
lasticSearch7.x - HTTP 操作 - 查询文档操作
Http请求java代码实现Es的查询
道阻且长,行则将至 行而不辍,未来可期
10-18 820
这个当初设计以及迁移到新的平台，此时逻辑废弃所以在这里记录下。主要实现CURD的工具类。
Elasticsearch, 搜索，查询，http端口API
walle167的博客
07-06 2611
ES http协议API 官网地址： https://www.elastic.co/guide/index.html 建议先看引言：https://www.elastic.co/guide/en/elasticsearch/reference/index.html 里面有相关的API说明， java rest客户端api: https://www.elastic.co/guide/en/elasticsearch/client/java-rest/index.html 我就只列举一下我觉得比较常用的的
JAVA通过用户验证访问Elasticsearch
qq_39572257的博客
08-01 1110
为了保证安全，Elasticsearch中启用用户权限验证。本文将对服务端的配置、客户端访问的配置进行一些个人总结。 环境：CentOS 7.0 软件版本：elasticsearch 7.3.1 服务端配置 进入安装目录下config，编辑elasticsearch.yml文件，在最后添加如下配置： xpack.security.enabled: true xpack.security.transport.ssl.enabled: true xpack.security.transport.ssl.ve
记第一次使用ES查询
玲听博客
03-16 3550
服务端ES2.1.1 版本，初次使用ES，不清楚服务服务端版本和客户端版本要保持一致的问题，开始使用了High Level REST Client，测试一致报Not a valid protocol version:SSH-2.0-OpenSSH_7.7，于是更换了Low Level REST Client，但报NoSuchMethod Error:org.elasticsearch.index.query.RangeBuilder.gte(java/lang/String)错误，2.1没有rest，包冲突
【工具类】Elasticsearch的HTTP客户端（Java）
dreambyday
12-27 827
Java基于Http请求操作ES，与Kibana上的操作一致。如图该DSL可转化为HTTP请求。
Java操作Elasticsearch的所有方法
weixin_39363116的博客
02-18 9457
使用Java操作Elasticsearch的所有方法 13.1 Elasticsearch简介 Elasticsearch是基于Lucene开发的一个分布式全文检索框架，向Elasticsearch中存储和从Elasticsearch中查询，格式是json。 a）、索引index，相当于数据库中的database。 b）、类型type相当于数据库中的table。 c）、主键id相当于数据库中记录的主键，是唯一的。 d）、文档 document （相当于一条数据） 文档是ElasticSearch的基本单
【ElasticSearch】之常用 HTTP 请求命令
王廷云的博客
08-16 4430
访问 ElasticSearch 的 http 协议 RESTful 端口为 9200： curl -X GET http://localhost:9200 添加 demo 索引： curl -X PUT http://localhost:9200/demo PUT 请求操作结果是幂等性的，意思是多次相同的请求结果是一样的，所以，再次执行该请求时会报错提示索引已存在了。 访问 demo 索引： curl -X GET http://localhost:9200/demo 访问所有索引信息：
通过HTTP的方式操作ES
sss294438204的博客
02-11 5194
文章目录一、关于索引的请求1、创建索引2、查询单个索引3、查询全部索引状态4、删除索引二、关于文档的请求1、创建文档1.1、采用POST的方式1.1.1、非幂等性1.1.2、幂等性1.2、采用PUT的方式(幂等性)2、查询文档2.1、根据id查询文档2.2、查询所有文档2.2.1、不带参方式2.2.2、请求体方式3、单条件查询3.1、直接跟参数查询3.2、请求体查询4、多条件查询4.1、同时满足条件4.2、只需要满足一个条件5、查询剔除不需要项6、查询排序7、过滤查询8、完全匹配查询9、高亮查询9.1、默认
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值