ElasticSearch8.X查询DSL语法案例进阶实战

于 2024-06-26 22:15:00 发布
阅读量688 收藏 17
点赞数 7
分类专栏： 微服务 es springcloud 文章标签： elasticsearch es DSL实战 es 8.x查询技巧 es8.x索引管理与数据操作 数据搜索和分析优化策略
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_41934990/article/details/139994868
版权
微服务 同时被 3 个专栏收录
14 篇文章 1 订阅
订阅专栏
springcloud
13 篇文章 0 订阅
订阅专栏
es
5 篇文章 0 订阅
订阅专栏

什么是Query DSL

  • Query DSL主要由两部分组成：查询和过滤。
    • 查询部分：用于指定搜索条件和匹配规则。例如，可以使用match查询进行全文检索，term查询进行精确匹配，range查询进行范围匹配等。
    • 过滤部分：用于对查询结果进行进一步的筛选和过滤。与查询查询不同，过滤查询不会影响得分计算，只是对结果进行简单的筛选操作。

查询子句

  • term查询：匹配一个精确值，如一个单词或一个数字
{ "term": { "name":"lifly" } }
  • match查询:匹配一个查询字符串中的一个或多个单词
{ "match": { "content": "hello world" } }
  • range查询：匹配一个数值范围

    • 用于根据范围条件进行查询，例如指定价格在一定区间内的商品

    • 范围符号

      • gte:大于等于

      • gt:大于

      • lte:小于等于

      • lt:小于

{ "range": { "age": { "gte": 20, "lte": 30 } } }
  • 分页查询：指定要跳过的文档数量(from)和需要返回的文档数量(size)
{
  "size::10,
  "from":0,
  "query":{
    "match_all":{}
  }
}
  • 分页结果排序：sort字段进行排序，desc,asc
{
  "sort":{
    "value":"desc,asc"
  }
}

  • bool查询：使用布尔逻辑（与、或、非）进行复杂的查询操作

    • "must"关键字用于指定必须匹配的条件，即所有条件都必须满足

    • "must_not"关键字指定必须不匹配的条件，即所有条件都不能满足

    • "should"关键字指定可选的匹配条件，即至少满足一个条件

{  
  "bool": {  
    "must": [  { "match": { "title": "Elasticsearch" } }],  
    "must_not": [{ "match": { "tag": "old" } }  ],
    "should":[{"match":{"tag":"new"}}]
  }  
}

查询子句实战

创建索引


PUT /mall-shop_dsl
{
  "settings": {
    "number_of_shards": 2,
    "number_of_replicas": 0
  },
  "mappings": {
    "properties": {
      "id": {
        "type": "keyword"
      },
      "title": {
        "type": "keyword"
      },
      "summary": {
        "type": "text"
      },
      "price": {
        "type": "float"
      }
    }
  }
}

插入数据

PUT /mall-shop_dsl/_bulk
{ "index": { "_index": "mall-shop_dsl" } }
{ "id": "1", "title": "Spring Boot","summary":"this is a summary Spring Boot video", "price": 9.99 }
{ "index": { "_index": "mall-shop_dsl" } }
{ "id": "2", "title": "java","summary":"this is a summary java video", "price": 19.99 }
{ "index": { "_index": "mall-shop_dsl" } }
{ "id": "3", "title": "Spring Cloud","summary":"this is a summary Spring Cloud video", "price": 29.99 }
{ "index": { "_index": "mall-shop_dsl" } }
{ "id": "4", "title": "Spring_Boot", "summary":"this is a summary Spring_Boot video","price": 59.99 }
{ "index": { "_index": "mall-shop_dsl" } }
{ "id": "5", "title": "SpringBoot","summary":"this is a summary SpringBoot video", "price": 0.99 }

查询dsl编写

精准查询 term 用于精确匹配一个指定字段的关键词，不进行分词处理
GET /mall-shop_dsl/_search
{
  "query":{
    "term":{
      "title":"Spring Boot"
    }
  }
}

在这里插入图片描述

match查询 用于执行全文搜索，它会将搜索查询与指定字段中的文本进行匹配
GET /mall-shop_dsl/_search
{
  "query":{
    "match": {
      "title": "SpringBoot"
    }
  }
}

在这里插入图片描述

match all查询，查询当前索引下所有数据
GET /mall-shop_dsl/_search
{
  "query":{
    "match_all": {}
  }
}

在这里插入图片描述

有条件查询，match对查询内容进行分词，然后进行查询，多个词条之间是or的关系
GET /mall-shop_dsl/_search
{
  "query":{
    "match": {
      "summary": "spring"
    }
  }
}

在这里插入图片描述

查询多个条件
GET /mall-shop_dsl/_search
{
  "query": {
    "match": {
      "summary": "spring cloud"
    }
  }
}

在这里插入图片描述

查询返回指定资源，source用于返回对应的字段
GET /mall-shop_dsl/_search
{
  "_source": ["title","price"], 
  "query": {
    "term": {
      "title": {
        "value": "java"
      }
    }
  }
}

在这里插入图片描述

range查询，查询价格大于1元小于20的数据
GET /mall-shop_dsl/_search
{
  "query":{
    "range":{
      "price":{
        "gt":1,
        "lt":20
      }
    }
  }
}

在这里插入图片描述

分页查询，查询从0开始的每页2个文档数量的数据

GET /mall-shop_dsl/_search
{
  "size": 2,
  "from": 3,
  "query": {
    "match_all": {}
  }
}

在这里插入图片描述

bool查询，查询价格大于20，且title为java的数据
GET /mall-shop_dsl/_search
{
  "query":{
    "bool": {
      "must": [
        {
          "match": {
          "summary": "Cloud"
          }
        },
        {
          "range": {
            "price": {
              "gt": 20
            }
          }
        }
      ]
    }
  }
}

在这里插入图片描述

Query DSL查询过滤Filter多案例实战

filter查询

  • 对查询结果进行筛选和过滤，返回符合条件的文档。
  • filter查询对结果进行缓存，提高性能查询，用于数字，日期日期，布尔逻辑，存在性检查等操作。
  • term过滤：与term查询类似，但不会影响得分计算
  • range()过滤：与range查询类似，但也不会影响得分计算
  • exists过滤：匹配存在指定字段的文档
  • missing过滤：匹配不存在指定字段的文档
  • 语法格式：
{
  "query": {
    "bool": {
      "filter": {
        // 过滤条件
      }
    }
  }
}

案例一：使用term过滤器查询title为java的数据


GET /mall-shop_dsl/_search
{
  "query": {
    "bool": {
      "filter": [
        {"term": {
          "title": "java"
        }}
      ]
    }
  }
}

在这里插入图片描述

使用range过滤器查询价格price在10-30之间的数据


GET /mall-shop_dsl/_search
{
  "query": {
    "bool": {
      "filter": [
        {"range": {
          "price": {
            "gte": 10,
            "lte": 30
          }
        }}
      ]
    }
  }
}

在这里插入图片描述

match高级用法之多字段匹配和短语搜索实战

  • match高级用法之多字段匹配

    • 多字段搜索匹配

      • 业务查询，需要在多个字段上进行文本搜索，用multi_match

      • 在match的基础上支持多个字段进行文本匹配查询。

      • 语法格式


GET /index/_search
{
  "query": {
    "multi_match": {
      "query": "要搜索的文本",
      "fields": ["字段1", "字段2", ...]
    }
  }
}
​
# query：需要匹配的查询文本。
# fields：一个包含需要进行匹配的字段列表的数组。

- 短语搜索匹配
	- elasticsearch提供的一种高级匹配查询类型，用于执行精确的短语搜索。
	- 相对于match查询，match_phrase会在匹配时考虑单词的顺序和位置
	- 语法格式

GET /index/_search
{
  "query": {
    "match_phrase": {
      "field_name": {
        "query": "要搜索的短语"
      }
    }
  }
}
​
# field_name：要进行匹配的字段名。
# query：要搜索的短语。
  • 创建索引
PUT /product
{
  "settings": {
    "number_of_shards": 2,
    "number_of_replicas": 0
  },
  "mappings": {
    "properties": {
      "product_name": {
        "type": "text"
      },
      "description": {
        "type": "text"
      },
      "category": {
        "type": "keyword"
      }
    }
  }
}

插入数据


POST /product/_bulk
{ "index": { "_index": "product", "_id": "1" } }
{ "product_name": "iPhone 12", "description": "The latest iPhone model from Apple", "category": "electronics" }
{ "index": { "_index": "product", "_id": "2" } }
{ "product_name": "Samsung Galaxy S21", "description": "High-performance Android smartphone", "category": "electronics" }
{ "index": { "_index": "product", "_id": "3" } }
{ "product_name": "MacBook Pro", "description": "Powerful laptop for professionals", "category": "electronics" }
{ "index": { "_index": "product", "_id": "4" } }
{ "product_name": "Harry Potter and the Philosopher's Stone", "description": "Fantasy novel by J.K. Rowling", "category": "books" }
{ "index": { "_index": "product", "_id": "5" } }
{ "product_name": "The Great Gatsby", "description": "Classic novel by F. Scott Fitzgerald", "category": "books" }
  • 在product_name和description字段上执行了一个multi_match,将查询文本设置为"iphone",对这两个字段进行搜索，并返回匹配到的文档，这个是or的关系，会有最佳匹配。
GET /product/_search
{
  "query": {
    "multi_match": {
      "query": "iphone",
      "fields": ["product_name","description"]
    }
  }
}

在这里插入图片描述

使用match_phrase查询在description字段上执行了一个短语搜索将要搜索的短语设置为 “classic novel”。使用match_phrase查询，Elasticsearch将会返回包含 “classic novel” 短语的文档

GET /product/_search
{
  "query": {
    "match_phrase": {
      "description": "classic novel"
    }
  }
}

在这里插入图片描述

日常单词拼写错误-fuzzy模糊查询案例实战

介绍

  • fuzzy查询是Elasticsearch中提供的一种模糊匹配查询类型，用在搜索时容忍一些拼写错误或近似匹配

  • 使用fuzzy查询，可以根据指定的编辑距离（即词之间不同字符的数量）来模糊匹配查询词

  • fuzzy模糊查询是拼写错误的简单解决方案，但具有很高的 CPU 开销和非常低的精准度

  • 参数介绍

    • filed_name:要进行模糊匹配的字段名。

    • value:要搜索的词

    • fuzziness:参数指定了模糊度

      • 0,1,2

        • 指定数字，表示最大编辑距离，较低的数字表示更严格的匹配，较高的数字表示更松散的匹配。

        • fuzziness的值，表示针对某个单词而言，而不是总的错误的数值。

      • auto:elasticsearch根据词的长度自动选择模糊度

        • 如果字符串的长度大于5，那fuzziness的值自动设置为2

        • 如果字符串的长度小于2，那fuzziness的值自动设置为0

松散匹配


GET /product/_search
{
  "query": {
    "fuzzy": {
      "description": {
        "value": "nov",
        "fuzziness": "2"
      }
    }
  }
}

在这里插入图片描述

严格匹配

GET /product/_search
{
  "query": {
    "fuzzy": {
      "description": {
        "value": "nov",
        "fuzziness": "1"
      }
    }
  }
}

在这里插入图片描述

自动检查

GET /product/_search
{
  "query": {
    "fuzzy": {
      "description": {
        "value": "novek",
        "fuzziness": "auto"
      }
    }
  }
}

在这里插入图片描述

DSL搜索高亮显示案例实战

  • 在 ES 中，高亮语法用于在搜索结果中突出显示与查询匹配的关键词

  • 高亮显示是通过标签包裹匹配的文本来实现的，通常是 或其他 HTML 标签

  • 基本用法：在 highlight 里面填写要高亮显示的字段，可以填写多个

  • 在DSL查询语句中添加highlight字段，指定要高亮的字段以及高亮显示的前置和后置标签。

  • 高亮显示通常只适用于全文检索查询（如match、multi_match等），因为这类查询会对文本进行分词处理，从而能够识别出与查询关键词匹配的文本片段。

单条件查询高亮显示(商品名称为iphone)

GET /product/_search
{
  "query": {
    "match": {
      "product_name": "iPhone"
    }
  },
  "highlight": {
    "fields": {
      "product_name": {}
    }
  }
}

在这里插入图片描述

多条件查询(title为iPhone,description中包含iphone的高亮显示)

GET /product/_search
{
  "query": {
    "bool": {
      "should": [
        {"match": {
          "product_name": "iphone"
        }},
        {
          "match": {
            "description": "iphone"
          }
        }
      ]
    }
  },
  "highlight": {
    "fields": {
      "product_name": {},
      "description": {}
    }
  }
}

在这里插入图片描述

多条件查询(title为iPhone,description中包含iphone的高亮显示)修改样式

  • pre_tags:前置标签

  • post_tags:后置标签

  • fields:需要高亮的字段


GET /product/_search
{
  "query": {
    "bool": {
      "should": [
        {"match": {
          "product_name": "iphone"
        }},
        {
          "match": {
            "description": "iphone"
          }
        }
      ]
    }
  },
  "highlight": {
    "pre_tags": "<font color='yellow'>",
    "post_tags": "</font>",
    "fields": {
      "product_name": {},
      "description": {}
    }
  }
}

在这里插入图片描述

通过本实战指南，您已掌握了Elasticsearch Query DSL的核心技能，从基础查询到高级搜索技巧，再到性能优化策略。实践是检验真理的唯一标准，鼓励您动手尝试这些示例，在真实项目中灵活运用这些知识，构建高性能、高灵活性的搜索解决方案。无论是处理海量数据的快速检索，还是构建精准的全文搜索体验，Query DSL都是您不可或缺的工具箱。继续探索Elasticsearch的广阔世界，让数据为您所用，解锁更多业务洞察与价值。

更多精彩内容请关注以下公众号

在这里插入图片描述

double_lifly
关注
  • 7
    点赞
  • 踩
  • 17
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
企业级Elasticsearch 8.X技术来临！性能优化与集群部署 基础与进阶全面实战
06-02
性能优化与集群部署 基础与进阶全面实战”旨在帮助学员深入了解Elasticsearch 8.X版本的核心技术，掌握性能优化与集群部署的关键知识，从而能够更好地应对企业级应用中的挑战。 课程亮点： Elasticsearch基础概念...
ElasticSearch7.x入门到案例实战教程
06-29
ElasticSearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎，基于RESTful web接口。Elasticsearch是用Java开发的，并作为Apache许可条款下的开放源码发布，是当前流行的企业级搜索...
十、Elasticsearch 8.x 分布式搜索引擎 -2-搜索查询
Three-Sides
02-04 891
query：查询条件、from和size：分页条件、sort：排序条件、highlight：高亮条件。
Elasticsearch8 常用查询
llc的博客
07-06 1308
_source excludes 排除返回字段，sort时间倒序排序，from size分页
ElasticSearch 学习笔记 - 8. 查询
weixin_34352005的博客
10-10 115
1、概念 映射（Mapping）描述数据在每个字段内如何存储 分析（Analysis） 全文是如何处理使之可以被搜索的 领域特定查询语言（Query DSL） Elasticsearch 中强大灵活的查询语言 2、空搜索 GET /_search { "hits" : { "total" : 14, ...
【java】仿级联查询 | Java通过DSL字符串查询ES （es8 dsl java）
CTRA®王大大技术中心
02-22 3266
模拟aws中级联查询一、需求二、设计1、背景2、思路三、Java代码实现四、DSL表达式五、前端拼接 DSL 字符串六、Java使用ES查询DSL字符串 一、需求 1、实现一个搜索框，可以实现所有的字段的查询，并且每个字段可以支持不同的查询方式 如下图所示 2、点击任何一个字段，弹出该字段支持的查询方式 二、设计 1、背景 由于项目是前后端分离项目，这里就需要前端的配合 由于我们的数据库选择是 mysql+es 今天这篇文章主要是使用es进行业务查询 2、思路 如何获取该表的所有列字段？ 如果根据字段
ES8 打印DSL
u011250186的博客
10-20 1453
ES8 打印DSL
【ElasticSearch8】springboot整合es8（三），基于scroll的深度分页
qq_24473507的博客
08-25 4597
springboot elasticSearch8开发（三），基于scroll的深度分页
Java 之 ElasticSearch7.x.x 爬虫 + 项目实战-搜索页面
11-09
在本项目中，我们主要探讨的是如何利用Java技术栈，特别是Elasticsearch 7.x.x版本，SpringBoot框架以及爬虫技术，来构建一个实际的搜索页面应用。这个项目实战涵盖了多个关键知识点，下面将详细阐述这些核心内容。 ...
elasticSearch查询语句DSL
06-27
在这篇资源中，我们将详细介绍如何使用DSL...最后，我们将分享一些实用技巧和最佳实践，帮助您充分发挥DSL在Elasticsearch中的优势。我们将探讨性能优化、查询调试和索引优化等关键主题，以提升查询效率和搜索准确性。
elasticsearch7.17.8版本分词器插件安装包
最新发布
11-13
**Elasticsearch 7.17.8 分词器插件安装详解** Elasticsearch（ES）是一款流行的开源全文搜索引擎，常用于日志收集、数据分析和实时搜索等场景。在处理中文文本时，分词器插件是必不可少的组件，它能够将中文字符串...
elasticsearch8.x高亮和分页
weixin_46294086的博客
05-31 969
今天咱们就来聊一聊elasticsearch8.x版本如何设置搜索关键词高亮并且分页，因为es7.x和es8.x版本差异比较大，导致了很多es用户在使用时出现了很多问题，es7和es8的高亮就非常不一样，话不多说，直接上代码解释。如果大家遇到了版本问题或者Java连接不上elasticsearch8.x，可以查看我的这一篇博客。当中page分页是作者自己编写的一个简单的分页。下面是article索引实体类。
springboot整合elasticsearch8组合条件查询
winsanity的博客
10-12 2708
springboot整合elasticsearch8组合条件查询
ElasticSearch查询方法（python）
任昌伟
02-25 2247
Find all es.search(index="my_index",doc_type="test_type") # 或者 body = { "query":{ "match_all":{} } } es.search(index="my_index",doc_type="test_type",body=body) term And terms #
ES8生产实践——数据查询与数据可视化(Grafana)
qq_33816243的博客
08-17 2478
ES数据可视化除了使用kibana外，grafana也是常用的数据可视化工具。相较于kibana来说，grafana支持的图表样式等配置项更多，可以根据自己的需求灵活制作出各种复杂的图表，相应的上手难度略高于kibana。使用Grafana的好处是将来如果使用Prometheus监控，可以将业务日志图表与服务性能监控组合展示，可以按不同的dashboard设置权限方便不同组的用户查看与编辑。接下来让我们一起上手使用grafana，实现数据查询与图表制作。
【DSL】ES+DSL 查询语法
热门推荐
weixin_41613094的博客
07-06 1万+
ES+DSL 查询语法学习的复习
ES8(Java API Client)查询详解
Charge8的博客
09-04 1万+
ES8(Java API Client)查询详解
ES8基本命令
lnh1998的博客
05-15 1203
ElasticSearch是面向文档型数据库构造类似于数据库：indexes(索引库=数据库)-->types(类型=表)-->documents(文档=行)-->field(字段=字段)但是在7.X开始，Type已经开始被废弃。正排索引：根据主键id关联内容，然后再找关键字。倒排索引：根据关键字查询主键id。选择Solr还是ElasticSearch。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

double_lifly

点喜欢就是最好的打赏！！

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值