ElasticSearch查询

最新推荐文章于 2024-08-30 16:23:11 发布
最新推荐文章于 2024-08-30 16:23:11 发布
阅读量190 收藏
点赞数
分类专栏： ES

ElasticSearch查询

1. term&terms查询

1.1 term查询

term的查询是代表完全匹配，搜索之前不会对你索引的关键词进行分词，对你的关键字去文档分词库中去匹配内容。

PUT /sms-logs-index
{
  "settings":{
    "number_of_shards": 5,
    "number_of_replicas":1
  },
  "mappings":{
    "sms-logs-type":{
      "properties":{
        "createDate":{
          "type":"date",
          "format":"yyyy-MM-dd"
        },
        "sendDate":{ 
          "type":"date",
          "format":"yyyy-MM-dd"
        },
        "longCode":{
          "type":"keyword"
        },
        "mobile":{
          "type":"keyword"
        },
        "corpName":{
          "type":"keyword"
        },
        "smsContent":{
          "type":"text",
          "analyzer": "ik_max_word"
        },
        "state":{
          "type":"integer"
        },
        "operatorId":{
          "type":"integer"
        },
        "province":{
          "type":"keyword"
        },
        "ipAddr":{
           "type":"ip"
        },
        "replyTotal":{
          "type":"integer"
        },
        "fee":{
          "type":"long"
        }
      }
    }
  }
}

在这里插入图片描述

1.2 terms查询

terms和term的查询机制是一样的，都不会将指定的查询关键词进行分词，直接去分词库中匹配，找到相应文档内容
terms是在针对一个字段包含多个值的时候使用，类似于IN

在这里插入图片描述

在这里插入图片描述
补充说明，分词和不分词的效果，
smsContent 通过ik分词器分词后
在这里插入图片描述
term&terms不会对进行分词所以查询不到
在这里插入图片描述

2. match查询

match查询属于高层查询，它会根据你的查询的字段类型不一样，采用不用的查询方式。

  • 查询的是日期或者是数值的话，它会将你基于字符串查询内容转换为日期或者数值对待。
  • 如果查询的内容是一个不能被分词的内容（keyword），match查询不会对你指定的查询关键字进行分词。
  • 如果查询的内容时一个可以被分词的内容（text）,match会将你指定的查询内容根据一定的方式去分词，去分词库中匹配指定的内容。

match查询，实际底层就是多个term查询，将多个term查询的结果给你封装到了一起。

2.1 match_all查询

POST /sms-logs-index/sms-logs-type/_search
{
  "query": {
    "match_all": {}
  }
}

在这里插入图片描述
不加size默认返回10条数据

2.2 match查询

POST /sms-logs-index/sms-logs-type/_search
{
  "query": {
    "match": {
      "smsContent": "河马订"
    }
  }
}

在这里插入图片描述

2.3 布尔match查询

基于一个Filed匹配的内容，采用and或者or的方式连续

POST /sms-logs-index/sms-logs-type/_search
{
  "query": {
    "match": {
      "smsContent": {
        "query": "河马 订单",
        "operator": "and" #内容即包含河马也包含健康
      }
    }
  }
}

POST /sms-logs-index/sms-logs-type/_search
{
  "query": {
    "match": {
      "smsContent": {
        "query": "河马 订单",
        "operator": "or" #内容包含河马或者包含健康
      }
    }
  }
}

在这里插入图片描述

3 _id查询

GET /sms-logs-index/sms-logs-type/5S6mU3gBe8iP1EnkCcIk

在这里插入图片描述

POST /sms-logs-index/sms-logs-type/_search
{
  "query": {
    "ids":{
      "values": ["5S6mU3gBe8iP1EnkCcIk","5i6nU3gBe8iP1EnkpcJt"]
    }
  }
}

在这里插入图片描述

4. prefix查询

前缀查询

POST /sms-logs-index/sms-logs-type/_search
{
  "query": {
    "prefix": {
      "corpName": {
        "value": "河马"
      }
    }
  }
}

在这里插入图片描述

5. fuzzy查询

模糊查询，我们输入字符的大概，ES就可以根据输入的内容大概去匹配一下结果。输入内容可以有错别字

POST /sms-logs-index/sms-logs-type/_search
{
  "query": {
    "fuzzy": {
      "corpName": {
        "value": "河马先生",
        "prefix_length": 2
      }
    }
  }
}

prefix_length 指定前面2个单词不能错
在这里插入图片描述

6. wildcard查询

通配符查询，和MySQL中的like是一个套路，可以在查询时，在字符串中指定通配符*和占位符？

POST /sms-logs-index/sms-logs-type/_search
{
  "query": {
    "wildcard": {
      "corpName": {
        "value": "河马*"
      }
    }
  }
}

在这里插入图片描述

7. range查询

范围查询，只针对数值类型，对某一个Field进行大于或者小于的范围指定。
gt >
gte >=
lt <
lte <=

   POST /sms-logs-index/sms-logs-type/_search
{
  "query": {
    "range": {
      "fee": {
        "gte": 2,
        "lte": 5
      }
    }
  }
}

在这里插入图片描述

8. regexp查询

正则查询，通过你编写的正则表达式去匹配内容
prefix,fuzzy,wildcard和regexp查询效率相对较低，要求效率比较高时，避免去使用。

POST /sms-logs-index/sms-logs-type/_search
{
  "query": {
    "regexp": {
      "mobile": "186[0-9]{8}"
    }
  }
}

在这里插入图片描述

9. 深分页scroll

ES对from+size是有限制的，from和size二者之和不能超过1w
原理：
   ES查询数据的方式，
   第一步先将用户指定的关键字进行分词，
   第二步将词汇去分词库中进行检索，得到多个文档的id，
   第三步去各个分片中去拉取指定的数据。
   第四步将数据根据score进行排序，
   第五步根据from的值，将查询到的数据舍弃一部分，
   第六步返回结果。

scroll在ES查询数据的方式：
第一步将用户指定的关键词进行分词。
第二步将词汇去分词库中进行检索，得到多个文档的id。
第三步将文档的id存放在一个ES的上下文中。
第四步根据你指定的size的格式去ES中检索指定的数据，拿完数据的文档id，会从上下文中移除。
第五步如果需要下一页数，直接去ES的上下文中，找后续内容。
scroll查询方式，不适合做实时的查询。

执行scroll查询，返回第一页数据，并且将文档id信息存放在ES上下文中，指定生存时间为1m

POST /sms-logs-index/sms-logs-type/_search?scroll=1m
{
  "query": {
    "match_all": {}
  },
  "size": 2,
  "sort": [
    {
      "fee": {
        "order": "desc"
      }
    }
  ]
}

在这里插入图片描述

根据第一次查询的结果的_scroll_id,查询下一页的数据，查询完的数据会从内存中删除
在这里插入图片描述

10. delete-by-query

 根据term，match等查询方式去删除大量的文档
 如果需要删除的内容是index下的大部分数据，推荐创建一个全新的index，将保留的文档内容，添加到全新的索引

POST /sms-logs-index/sms-logs-type/_delete_by_query
{
  "query":{
    "range":{
      "fee":{
        "lt": 5
      }
    }
  }
}

在这里插入图片描述

11. 复合查询

11.1 bool查询

复合过滤器，将你的多个查询条件，以一定的逻辑组合在一起

  • must: 所有的条件，用must组合在一起，表示And的意思
  • must_not: 将must_not中的条件，全部都不能匹配，表示not的意思
  • should: 所有的条件，用should组合在一起
POST /sms-logs-index/sms-logs-type/_search
{
  "query": {
    "bool": {
      "should": [
        {
          "term": {
            "province": {
              "value": "北京"
            }
          }
        },
        {
          "term": {
            "province": {
              "value": "武汉"
            }
          }
        }
      ],
      "must_not": [
        {
          "term": {
            "operatorId": {
              "value": "2"
            }
          }
        }
      ],
      "must": [
        {
          "match": {
            "smsContent": "中国"
          }
        },
        {
          "match": {
            "smsContent": "平安"
          }
        }
      ]
    }
  }
}

在这里插入图片描述

11.2 boosting查询

boosting查询可以帮助我们去影响查询后的score.

  • positive: 只有匹配上positive的查询的内容，才会被放到返回的结果集中。
  • negative: 如果匹配上的和positive并且也匹配上了negative，就可以降低这样的文档score.
  • negative_boost：指定系数，必须小于1.0
    查询是分数如何计算：
    • 搜索的关键字在文档中出现的频次越高，分数也就越高
    • 指定的文档内容越短，分数就越高
    • 我们在搜素时，指定的关键字也会被分词，这个分词的内容，被分词库匹配的个数越多，分数越高。
POST /sms-logs-index/sms-logs-type/_search
{
  "query": {
    "boosting": {
      "positive": {
           "match":{
               "smsContent": "河马"
            }
      },
      "negative":{
          "match":{
            "smsContent": "配送"
         }
       },
      "negative_boost": 0.5
    }
  }
}

在这里插入图片描述

12 filter查询

query查询，根据你的查询条件，去计算文档的匹配度得到一个分数，并且根据分数进行排序，query不会做缓存
filter查询，根据你的查询条件去查询文档，不去计算分数，而且filter会对经常被过滤的数据进行缓存。

POST /sms-logs-index/sms-logs-type/_search
{
  "query": {
    "bool": {
      "filter": [
         {
           "term": {
            "corpName": "河马鲜生"
          }
         },
         {
           "range": {
             "fee":{
                "lt": 6
             }
           }
         }
        ]
      }
    }
  }
}

在这里插入图片描述

剑若问天
关注
专栏目录
Java操作ElasticSearch相关内容
weixin_45892531的博客
08-11 880
Java连接ES 创建Maven工程 导入依赖 <dependencies> <!-- 1. elasticsearch--> <dependency> <groupId>org.elasticsearch</groupId> <artifactId>elasticsearch</artifactId> <version&gt...
es查询字段更新记录_ElasticSearch查询 第二篇：文档更新
weixin_39661345的博客
12-19 1428
《ElasticSearch查询》目录导航：ElasticSearch是性能优化的分布式全文搜索引擎，存储数据的载体是文档(Document)，它的优势在于搜索速度快和支持聚合操作，在更新文档时，基本上能够达到实时搜索。ElasticSearch引擎总是按照文档标识来更新数据，并发控制是通过顺序的版本ID(version)实现的，控制写-写、写-读冲突，实现数据弱一致性。在ElasticSearc...
Elasticsearch查询
外星喵的博客
07-31 5078
Elasticsearch查询使用案例
【ES常用查询操作】
最新发布
weixin_46356409的博客
08-30 1865
"query": {在这个示例中，查询将匹配field1的值大于10的文档。
ES查询客户端，elasticsearch可视化工具 elasticsearch查询客户端
06-20
Elasticsearch查询客户端是用于与ES服务器通信的软件，它们提供了多种语言的API，允许开发者以编程方式执行索引、搜索、更新和删除等操作。常见的Elasticsearch客户端包括： - **Jest**：一个轻量级的Java REST...
ES查询客户端，elasticsearch可视化工具
06-24
elasticsearch的客户端比较出名的就是elasticsearch head 和Kibana了， 但是elasticsearch head已经停止更新，且样式老旧，功能不全； 而Kibana虽功能全面，但是启动麻烦，大部分功能用不上，很不灵活，所以采用vite...
JAVA使用ElasticSearch查询in和not in的实现方式
08-26
JAVA使用ElasticSearch查询in和not in的实现方式 Elasticsearch是一个基于Lucene的搜索服务器，提供了一个分布式多用户能力的全文搜索引擎，基于RESTful web接口。它是用Java开发的，并作为Apache许可条款下的开放...
java调用Elasticsearch查询
qq_29632925的博客
10-31 1013
你好！ 这是你第一次使用 Markdown编辑器 所展示的欢迎页。如果你想学习如何使用Markdown编辑器, 可以仔细阅读这篇文章，了解一下Markdown的基本语法知识。我们对Markdown编辑器进行了一些功能拓展与语法支持，除了标准的Markdown编辑器功能，我们增加了如下几点新功能，帮助你用它写博客：撤销：Ctrl/Command + Z 重做：Ctrl/Command + Y 加粗：Ctrl/Command + B 斜体：Ctrl/Command + I 标题：Ctrl/Command + S
ElasticSearch高级 （Query DSL查询 bulk批量操作 导入数据 各种查询 实战技巧-优化比重 全量与增量数据同步）
m0_46690280的博客
09-25 4120
ElasticSearch高级01-今日内容02-ElasticSearch高级操作2.1-bulk批量操作-脚本2.2-bulk批量操作-JavaAPI2.3-导入数据-分析&创建索引2.4-导入数据-代码实现3-ElasticSearch查询3.1-matchAll-脚本3.2-matchAll-JavaAPI3.3-termQuery3.4-matchQuery3.5-模糊查询-脚本3.5.1-wildcard查询3.5.2正则查询3.5.3前缀查询3.6-模糊查询-JavaAPI3.7-范围
Elasticsearch的查询
limengshi138392的博客
08-11 238
1 Elasticsearch基本查询 根据文档ID curl -X GET 127.0.0.1:9200/articles/article/1 curl -X GET 127.0.0.1:9200/articles/article/1?_source=title,user_id curl -X GET 127.0.0.1:9200/articles/article/1?_source...
ElasticSearch的查询
weixin_45882228的博客
11-19 1269
ElasticSearch的查询
Elasticsearch 搜索查询
程序员学习圈
02-27 365
1. query string search(搜索全部信息) 1.1 GET elasticsearch/student/_search 返回： { "took": 4, "timed_out": false, "_shards": { "total": 5, "successful": 5, "skipped...
Elasticsearch或查询
青苔小榭
03-08 116
查询A不存在或 存在但未达到B BoolQueryBuilder ABuilder = QueryBuilders.boolQuery(); BoolQueryBuilder a1 = QueryBuilders.boolQuery(); a1.mustNot(QueryBuilders.existsQuery("A")); BoolQueryBuilder a2 = QueryBuilders.boolQuery(); a2
Elasticsearch 查询详解
qq_34125999的博客
10-25 1314
term的查询是代表完全匹配，搜索之前不会对你搜索的关键字进行分词，如关键字手机，不会分成手和机，再根据关键字去文档分词库中去匹配内容。match查询属于高层查询，会根据你查询的字段的类型不一致，采用不同的查询方式。，而且filter会对经常被过滤的数据进行缓存，方便下次快速定位查询；由于filter不计算分数，所以性能优于计算分数的查询。filter，根据你的查询条件去查询文档，
ElaticSearch基本查询
weixin_30650039的博客
01-23 190
刚开始用es查询语法, 感觉很蒙, 什么云里雾里, 网上一大片, 东一篇的西一篇的, 不知所云. 到现在才搞清楚, ES主要是以一种restfulAPI的形式. ES查询方式主要有两种, 但你也可以用_cat命令查看集群情况 (1) _cat 的使用 查看集群的节点信息 curl -XGET http://192.168.100.3:9200/_cat/nodes?v ...
Elastic Search查询与统计实战
“Elastic Search学习笔记包含了关于Elasticsearch（ES）的查询、排序和统计操作的示例。” 在Elasticsearch（ES）的学习中，掌握如何进行有效的查询、排序和统计是至关重要的。以下是对这些核心功能的详细解释： ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值