【Elasticsearch 探索之路】(五)搜索相关 Search-API

本节主要讲解 Elasticsearch 的 搜索相关功能 Search-API,讲解什么是 URL Search 和 Request Body Search 的语法,对常用的语法都会一一进行详细介绍。

1.Search API

Search API 分为两大类一个是 URL Search 和 Request Body Search。

  • URL Search

    • 在 URL 中根据参数查询结果

  • Request Body Search

    • 一种基于 JSON 格式的查询语言 Query Domain Specific Language (DSL)

2.URL Search

GET /movies/_search?q=love&df=title&sort=year:desc&from=0&size=10&timeout=1s
{
    "profile":"true"
}
  • q 指定查询语句

  • df 指定查询字段,不指定对所有字段进行查询

  • Sort 排序

  • from 和 size 用于分页

  • 如果要查询执行过程,可以增加 profile 为 true

2.1Query String Syntax

2.1.1TermQuery

GET /movies/_search?q=title:(Beautiful Mind)
{
    "profile":"true"
}

输出为有 Beautiful 或者 Mind 的电影名称

6827ae973e53a687fb6382a1a9b0c4a1.jpeg 97c441604278d4a87c5f25d77eb9418d.jpeg

2.1.2PhraseQuery

GET /movies/_search?q=title:"Beautiful Mind"
{
    "profile":"true"
}

输出为按照顺序同时出现 "Beautiful Mind" 这个词语的电影名称

6b0f2ff9d9cbed7b261148cf4eda3527.jpeg 7b57b7e3f0a0b8632f60178c30e7aeac.jpeg

TermQuery 必须带有 () ,比如 (Beautiful Mind),不带的情况是不一样的。

GET /movies/_search?q=title:(Beautiful Mind)

Mind 为泛查询,对所有字段都进行查询

aad20b5f1ad4a7127b237f62067b6a4a.jpeg

2.1.3布尔查询

  • AND / OR / NOT 或者 && /|| / !

    • 必须大写

    • title:(Beautiful OR Mind)

GET /movies/_search?q=title:(Beautiful OR Mind)
{
    "profile":"true"
}

里面执行是 BooleanQuery,最后还是以 TermQuery 进行分组查询。

4cb22881e4e346f3c7117f622724f63e.jpeg 038c1b89b4384c9fdc1243b2717e46c9.jpeg

2.1.4范围查询

  • [] 为闭区间,{} 为开区间

  • year:[2018 TO 2019],查询时间在2018-2019年的电影

GET /movies/_search?q= year:[2018 TO 2019]
{
    "profile":"true"
}
aee7b00dc3676a46f444a0db240550e7.jpeg

2.1.5算数查询

  • year:>=2018,匹配电影在2018年以后的电影

GET /movies/_search?q=year:>=2018
{
    "profile":"true"
}
5da4ab5d636b4fb41424b49a5d623a74.jpeg

2.1.6通配符和正则匹配

  • ? 代表1个字符,*代表0到多个字符,这种不推荐,占用太多空间

  • title:b*,匹配电影名称有 b 开头的名称

  • title:[bu],匹配电影名称有 b 开头的名称

GET /movies/_search?q=title:b*

2.1.7模糊查询

  • "Avengers War"~2 ,Avengers 和 War 之间有两个 term,匹配 Avengers: Infinity War - Part I,不能匹配 Avengers: War。

GET /movies/_search?q=title:"Avengers War"~2

d3a93a1a72326fe9338185627eff1113.jpeg

3.Request Body Search

其实在高阶使用方法上只有 Request Body Search 才能实现,所以也是推荐使用这种方法查询学习。

Request Body Search 将查询语句通过通过 HTTP 方式发送到 ES,进行查询

3.1Query DSL

POST kibana_sample_data_ecommerce/_search
{
  "profile": true,
  "_source":["customer_first_name","customer_full_name","customer_gender"],
  "from":10,
  "size":20,
  "sort":[{"order_date":"desc"}],
    "query": {
        "match_all": {}//查询所有文档
    }
}
c60bc1003517b1a71d334fabc4082c4f.jpeg
  • from 和 size 进行分页,"from":10,
    "size":20,from 从 10 开始,返回20个结果,不填写时from=0,size=10

  • sort 根据某些字段进行排序,最好选择日期或者数字的列进行排序

  • _source 当你不需要对所有字段进行查询,通过 _source 选择需要展示数据,不填写则所有,)source 支持正则

3.2脚本字段

脚本字段简单说通过 ES 的 painless 脚本去算出一个新的字段。这个有什么用处呢?当你要对一个列排序,发现存储的有不同的单位,需要转换之后才能做一个统一的排序。

GET kibana_sample_data_ecommerce/_search
{
  "script_fields": {
    "new_field": {
      "script": {
        "lang": "painless",
        "source": "doc['customer_id']+'_2333333!'"
      }
    }
  },
  "query": {
    "match_all": {}
  }
}
17a8cd40c76c78320ec48d61f6d99b6b.jpeg

脚本字段不要选择文本类型,默认禁止,可以通过设置 fielddata = true 开启,不建议。

3.3Match 查询表达式

前面 URL Search 中讲解 Term 和 Phrase 查询,现在我们来看在 Request Body Search 是怎么实现。

  • 使用 quest-match 方式,下一层填写具体查询内容,

  • 查询内容两个字符串,类似于 OR 方式。

POST movies/_search
{
  "query": {
    "match": {
      "title": "Who Last"
    }
  }
}
e2c826de438b07e93e4a7630b85840fc.jpeg

如果你要要求 Who Last 要同时出现,增加 "operator": "and" 实现。

POST movies/_search
{
  "query": {
    "match": {
      "title": {
        "query": "Who Christmas",
        "operator": "and"
      }
    }
  }
}
2b21a21a627a4d9093962ab3d13c1007.jpeg

3.4Match Phrase

  • 通过使用 query-match_phrase 实现 Phrase 查询

  • query 必须按照顺序排列

  • slop 实现模糊查询,slop=1,表示中间可以有一个字符

POST movies/_search
{
  "query": {
    "match_phrase": {
      "title": {
        "query": "Who Christmas"
      }
    }
  }
}
6b95d9393e5df3eb2d00a67a645fbcf6.jpeg
POST movies/_search
{
  "query": {
    "match_phrase": {
      "title": {
        "query": "Who Christmas",
        "slop": 1
      }
    }
  }
}
4639c8364f68ec670cb4cc3d7a50d9f1.jpeg

4.小结

本篇主要对 Search-Api 的 URL Search 和 Request Body Search 详细介绍,URL Search 和 Request Body Search 都可以简单方便查询我们想要的结果, 那么我们应该采用哪种方式进行查询呢?在简单的进行查询两种方式没有什么区别,但是在 ES 中高级使用方法只能在 Request Body Search 中做,所有这里也是推荐学习和使用这种方法,对 Request Body Search 高阶使用的方法会在之后的章节进行讲解。

5.数据来源

kibana_sample_data_ecommerce 索引是 kibana 自带的索引,需要手动在 kibana 进行点击导入

922bf036af6a955da57acbd561acf587.jpeg

movies 索引是 movielens 数据集,通过grouplens.org/datasets/ 这个地址下载。通过 Logstash 导入。logstash.conf 和 数据文件在公众号后台回复 ES 获取。

推荐阅读:

【Elasticsearch 探索之路】(四)Analyzer 分析

【数据挖掘算法系列(一)】k-近邻(KNN)算法

深入浅出线性回归算法(二)多种回归模型介绍

深入浅出线性回归算法(一)线性回归初步介绍


dafce36faf1781e6f0e33ff665860acb.jpeg

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值