Elasticsearch查询索引文档的6种方法

最新推荐文章于 2024-03-09 09:42:30 发布
最新推荐文章于 2024-03-09 09:42:30 发布
阅读量4.5k 收藏 3
点赞数
原文链接：https://www.cnblogs.com/shoufeng/p/9952002.html
版权

本文转自https://www.cnblogs.com/shoufeng/p/9952002.html

目录

 

1 Query String Search(查询串检索)

这种方法通过HTTP请求的Query String携带查询参数, 因此得名.

适用于临时性的查询请求, 比如在终端检查基础信息:

# 检索name中包含Java的文档, 并按价格降序排序: 
curl -XGET 'http://localhost:9301/book_shop/it_book/_search?q=name:Java&sort=price:desc'

生产环境中很少使用, 因为请求参数都封装到Query String中, 难以构建复杂的查询.

(1) 查询全部商品:

直接在浏览器的URL地址栏内输入搜索参数:

http://172.16.22.133:9301/book_shop/it_book/_search?q=name:Java

(2) 查询的结果:

{
    "took": 8,
    "timed_out": false,
    "_shards": {
        "total": 5,
        "successful": 5,
        "skipped": 0,
        "failed": 0
    },
    "hits": {
        "total": 3,
        "max_score": 1,
        "hits": [
            {
                "_index": "book_shop",
                "_type": "it_book",
                "_id": "2",
                "_score": 1,
                "_source": {
                    "name": "深入理解Java虚拟机：JVM高级特性与最佳实践",
                    "author": "周志明",
                    "category": "编程语言",
                    "desc": "Java图书领域公认的经典著作",
                    "price": 79,
                    "date": "2013-10-01",
                    "publisher": "机械工业出版社",
                    "tags": [
                        "Java",
                        "虚拟机",
                        "最佳实践"
                    ]
                }
            },
            // 省略另外两条记录
        ]
    }
}

(3) 查询结果中的各个参数的含义:

① took: 此次检索耗费的时间, 单位是毫秒;

② timed_out: 是否超出规定的检索时间, 这里没有设置, 后续会讲解此参数;

③ _shards: 被查询的index被分散成多个分片, 所以搜索请求会分发到所有的primary shard(或primary shard对应的某个replica shard)上, 这里显示各个分片是否查询成功的信息;

④ hits: 命中的文档情况, 有如下参数:

total: 符合条件的文档总数, 即hit(命中)数;
max_score: Lucene底层对检索到的文档的相关度的评分, 相关度越高, 说明越匹配, score的值也就越高.
hits: 命中的所有document的详细数据.

2 Query DSL(ES特定语法检索)

DSL: Domain Specified Language, 特定领域的语言, 一般需要Kibana等工具配合操作.

这种方式把查询参数构建成JSON格式的数据, 并封装到HTTP请求的Request Body(请求体)中, 可以构建各类复杂的查询语法, 功能要比Query String Search强大很多.

(1) 查询全部商品:

GET book_shop/it_book/_search
{
    "query": { "match_all": {} }
}

(2) 查询name中包含Java的商品, 并按price降序排序:

GET book_shop/it_book/_search
{
    "query": {
        "match": {
            "name": "Java"
        }
    },
    "sort": [
        { "price": "desc" }
    ]
}

(3) 分页查询商品 - 每页显示1条, 显示第3页:

GET book_shop/it_book/_search
{
    "query": { "match_all": {} },
    "from": 2,
    "size": 1
}

(4) 只查询商品的名称和价格:

GET book_shop/it_book/_search
{
    "query": {"match_all": {}},
    "_source": ["name", "price"]
}

—— 上述各类语法可以组合使用, 具体使用方法后续会陆续介绍.

3 Query Filter(过滤检索)

过滤查询, 比如: 查询name中包含Java, 且price不大于80元的商品:

GET book_shop/it_book/_search
{
    "query": {
        "bool": {
          	"must": {
                "match": {"name": "Java"}	// name中含有Java
            },
            "filter": {
                "range": { 
                    "price": {"lte": 80.0}	// 价格不大于80.0
                }
            }
        }
    }
}

4 Full Text Search(全文检索)

(1) 查询描述信息desc中包含"Java图书"的文档, 只显示name和desc的值:

GET book_shop/it_book/_search
{
    "query": {
        "match": {"desc": "Java图书"}
    },
    "_source": ["name", "desc"]
}

(2) 查询结果中有2条数据符合要求:

{
  "took" : 2,
  "timed_out" : false,
  "_shards" : {
    "total" : 5,
    "successful" : 5,
    "skipped" : 0,
    "failed" : 0
  },
  "hits" : {
    "total" : 2,
    "max_score" : 0.8630463,
    "hits" : [
      {
        "_index" : "book_shop",
        "_type" : "it_book",
        "_id" : "2",
        "_score" : 0.8630463,
        "_source" : {
          "name" : "深入理解Java虚拟机：JVM高级特性与最佳实践",
          "desc" : "Java图书领域公认的经典著作"			// desc中有"Java"和"图书"
        }
      },
      {
        "_index" : "book_shop",
        "_type" : "it_book",
        "_id" : "1",
        "_score" : 0.2876821,
        "_source" : {
          "name" : "Java编程思想（第4版）",
          "desc" : "Java学习必读经典,殿堂级著作！"		// desc中有"Java"
        }
      }
    ]
  }
}

(3) 全文检索的过程 —— 对查询结果的说明:

Elasticsearch会对字段"desc"的内容进行分词, 并建立倒排索引.

也就是说, 这里会把 "Java图书" 分词为 "Java"、"图"、"书" 3个, 检索时将匹配desc中含有 "Java"、"图"、"书" 中任意一个分词的文档.

—— 对于中文分词, 可以通过IK分词器, 把"Java图书"分解为"Java"、"图书" 2个词, 参考博主的文章:ES XX - Elasticsearch中使用IK中文分词器.

5 Phrase Search(短语检索)

Full Text Search会对检索文本作分词处理, 然后从倒排索引中作匹配查询, 如果一个文档的对应field中存在任意一个分解后的词, 那么这个文档就算匹配检索条件.

Phrase Search不会对检索串进行分词处理, 只有一个文档的对应field中包含与检索文本完全一致的内容, 该文档才算匹配检索条件, 也才能作为结果返回 —— 可以理解为全文检索场景下的部分精确匹配.

(1) 精确查询desc中包含"Java图书"的文档:

GET book_shop/it_book/_search
{
    "query": {
        "match_phrase": {
            "desc": "Java图书"
        }
    },
    "_source": ["name", "desc"]
}

(2) 查询结果只有一条数据符合要求了:

{
  "took" : 2,
  "timed_out" : false,
  "_shards" : {
    "total" : 5,
    "successful" : 5,
    "skipped" : 0,
    "failed" : 0
  },
  "hits" : {
    "total" : 1,
    "max_score" : 0.8630463,
    "hits" : [
      {
        "_index" : "book_shop",
        "_type" : "it_book",
        "_id" : "2",
        "_score" : 0.8630463,
        "_source" : {
          "name" : "深入理解Java虚拟机：JVM高级特性与最佳实践",
          "desc" : "Java图书领域公认的经典著作"		// desc中精确含有"Java图书"
        }
      }
    ]
  }
}

6 Highlight Search(高亮检索)

(1) 分页查询desc中包含"Java图书"的文档, 页大小为1, 显示第1页, 并对搜索条件高亮处理:

GET book_shop/it_book/_search
{
    "query": {
        "match": {"desc": "Java图书"}
    },
    "from": 0,
    "size": 1,
    "highlight": {
        "fields": {"desc": {}}
    },
    "_source": ["name", "desc"]
}

(2) 查询结果:

{
  "took" : 6,
  "timed_out" : false,
  "_shards" : {
    "total" : 5,
    "successful" : 5,
    "skipped" : 0,
    "failed" : 0
  },
  "hits" : {
    "total" : 2,
    "max_score" : 0.8630463,
    "hits" : [
      {
        "_index" : "book_shop1",
        "_type" : "it_book",
        "_id" : "2",
        "_score" : 0.8630463,
        "_source" : {
          "name" : "深入理解Java虚拟机：JVM高级特性与最佳实践",
          "desc" : "Java图书领域公认的经典著作"
        },
        "highlight" : {		// 高亮显示, 默认添加<em>标签
          "desc" : [
            "<em>Java</em><em>图</em><em>书</em>领域公认的经典著作"
          ]
        }
      }
    ]
  }
}

从上述结果的"<em>Java</em><em>图</em><em>书</em>也可以看出, ES底层对desc字段的值"Java图书"进行了分词处理:

说明: 本文的六种查询方法, 只是一个简单的入门, 详细使用方法会在后续的学习中逐一演示.

tinggrape
关注
  • 0
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
es-dedupe:用于从Elasticsearch删除重复文档的工具
05-05
ES重迭 用于删除按某些唯一字段（例如--field Uuid ）分组的重复文档的工具。 删除过程包括两个阶段： 汇总查询查找具有相同field值且至少出现2次的文档。 此类文档的一份副本留在ES中，其他副本则通过批量API删除（通常，几乎全部-总是有一些问题）。 每次DELETE操作之后，我们都等待索引更新。 处理过的文档将登录到/tmp/es_dedupe.log 。 不幸的是，聚合查询不一定是精确的。 基于/tmp/es_dedupe.log日志文件，我们查询每个field值，并在其他分片上删除文档副本。 根据群集中节点和分片的数量，可能仍会存在聚集查询未返回的文档。 为了禁用第二步，请使用--no-check标志。 码头工人 从Docker运行： docker run -it -e ES=locahost -e INDEX=my-index -e FIELD=id deri
Elasticsearch（ES）常用命令整理
一只慵懒的猫z的博客
01-21 1万+
在前几篇文章大家主要进行Elasticsearch的入门学习。接下来，本文着重介绍了Elasticsearch的常用基础命令。 1、获取es集群服务健康状态 2、查看ES中所有的索引 3、根据条件查询索引中的文档 4、查看索引的统计信息 5、新建索引 6、删除索引
【ElasticSearch】es索引、映射、文档基本操作&复杂查询
最新发布
扎哇太枣糕的笔记博客
03-09 1443
各位小伙伴们大家好，欢迎来到这个小扎扎的，本篇博客由B战尚硅谷的ElasticSearch视频总结而来，鉴于精神，这波依然是血赚┗|｀O′|┛
es创建索引 查询数据 删除索引教程.docx
04-25
es创建索引 查询数据 删除索引教程.docx
Elasticsearch的索引，单field索引和多field的联合索引
01-20
作为一个分布式可扩展的实时搜索和分析引擎，一个建立在全文搜索引擎 Apache Lucene基础上的搜索引擎。Elasticsearch 可以用于：分布式实时文件存储，并将每一个字段都编入索引，使其可以被搜索；实时分析的分布式搜索引擎；可以扩展到上百台服务器，处理PB级别的结构化或非结构化数据。 Elasticsearch的文件存储   Elasticsearch是面向文档型数据库，一条数据在这里就是一个文档，用JSON作为文档序列化的格式，比如下面这条用户数据： { name : XiaoMing, sex : Male, age
Elasticsearch7.14.0+thinkphp5.1后台管理索引和文档+权限管理
09-04
Elasticsearch+thinkphp5.1后台管理索引和文档+权限管理，可查看https://blog.csdn.net/weixin_39934453/article/details/120097526
elasticsearch查看所有索引
m0_67402774的博客
04-18 6989
GET _cat/indices
elasticsearch 如何查看index的内容
喝醉酒的小白
04-14 1万+
2、使用 Kibana 工具来进行查询，Kibana 是一个基于 Elasticsearch 的数据分析和可视化平台，可以通过 Kibana 的界面来查询 Elasticsearch 中的数据。3、使用 Elasticsearch 的客户端库，例如 Python 的 elasticsearch-py 库，可以通过编写 Python 脚本来查询 Elasticsearch 中的数据。其中 {index_name} 是要查询的 index 名称。
常规操作elasticSearch查看和索引（存储）数据
Phor的博客
10-27 6226
常规操作elasticSearch: 对于elasticSearch的操作 通常用rest API完成 查看所有节点： GET： 192.168.31.125:9200/_cat/nodes 示例返回： 127.0.0.1 16 97 10 0.23 0.56 0.62 dilm * 6a850788e223 查看健康状态： GET： 192.168.31.125:9200/_cat/health 示例返回： 1635298278 01:31:18 elasticsearch green 1 1 4
elasticsearch 索引文档相关操作
axibazZ的博客
09-08 1372
elasticsearch 基本操作
elasticsearch常用操作
sumengnan的博客
03-02 1万+
一、常用操作 （1）索引库操作 1、创建索引库（并指定ik分词器） PUT /es_db { "settings": { "index":{ "analysis.analyzer.default.type":"ik_max_word" } } } 2、查询索引库 GET /es_db 3、删除索引库 DELETE /es_db （2）文档操作 1、添加或修改文档（根据有无id判断） PUT /es_db/_doc/1 { "name"............
Elasticsearch索引和查询性能调优.pdf
04-25
Elasticsearch部署 1. 选择合理的硬件配置：尽可能使用 SSD Elasticsearch 最大的瓶颈往往是磁盘读写性能，尤其是随机读取性能。使用SSD（PCI-E接口SSD 卡/SATA接口SSD盘）通常比机械硬盘（SATA盘/SAS盘）查询速度快5~10倍，写入性能提升不明显。 对于文档检索类查询性能要求较高的场景，建议考虑 SSD 作为存储，同时按照 1:10 的比例配置内存和 硬盘。对于日志分析类查询并发要求较低的场景，可以考虑采用机械硬盘作为存储，同时按照 1:50 的比 例配置内存和硬盘。单节点存储数据建议在2TB以内，不要超过5TB，避免查询速度慢、系统不稳定。 在单机存储 1TB 数据场景下，SATA 盘和 SSD 盘的全文检索性能对比（测试环境：Elasticsearch5.5.3， 10亿条人口户籍登记信息，单机16核CPU、64GB内存，12块6TB SATA盘，2块1.5 TB SSD盘）。 2. 给JVM配置机器一半的内存，但是不建议超过32G 修改 conf/jvm.options 配置，-Xms 和 -Xmx 设置为相同的值，推荐设置为机器内
ES索引和文档操作实验.docx
05-12
ES索引和文档操作实验，适用于大学生实验报告手册
Elasticsearch分布式全文搜索引擎
weixin_45321681的博客
04-07 384
文章目录一、Elasticsearch 是什么？二、ES安装1、安装软件2、启动失败问题解决三、ES入门一、数据格式二、索引三、文档操作四、映射操作五、高级查询 一、Elasticsearch 是什么？ Elasticsearch是一个基于Lucene的搜索服务器，简称为ES。它提供了一个分布式多用户能力的全文搜索引擎，基于RESTful web接口。Elasticsearch是用Java语言开发的，并作为Apache许可条款下的开放源码发布，是一种流行的企业级搜索引擎。 二、ES安装 Elasti
ElasticSearch学习-- 索引操作和查询操作
CelineT的博客
05-27 4400
elastic search查询相关，must、must_not、filter、should、term、terms、bool、组合查询，索引创建等
Elastic Search中如何查看索引数据？
m0_67391121的博客
04-01 4653
（www.data-master.net 数据极） 问题： 我遇到了ElasticSearch和Rails的问题，由于attr_protected，一些数据没有正确编入索引。Elastic Search在哪里存储索引数据？怎么检查实际索引数据是否错误呢？ 检查映射的命令Tire.index(‘models’).mapping没有帮助，仅列出字段。 （www.data-master.net 数据极） 回答1： 探索ElasticSearch集群的最简单方法可能是使用elasticsearch -head命令。
elaseticsearch 配置ik分词器的热更新_ElasticSearch中的中文分词器以及索引基本操作详解
weixin_39913472的博客
11-30 638
本文是松哥所录视频教程的一个笔记，笔记简明扼要，完整内容小伙伴们可以参考视频，视频下载链接：https://pan.baidu.com/s/1NHoe0_52ut9fDUh0A6UQLA 提取码: kzv71.ElasticSearch 分词器介绍1.1 内置分词器ElasticSearch 核心功能就是数据检索，首先通过索引将文档写入 es。查询分析则主要分为两个步骤：词条化：分词器将输入的文...
Elasticsearch——创建/查看/删除索引、创建/查看/修改/删除文档、映射关系
热门推荐
胜天半子祁同伟
08-25 2万+
Elasticsearch——创建/查看/删除索引、创建/查看/修改/删除文档、映射关系
elasticsearch 查看索引_Elasticsearch学习1,docker,kibana
weixin_39543773的博客
11-20 275
不了解docker的可以看上一篇文章：centos7安装docker，结合docker安装mysql，学习简单使用简介Elasticsearch是目前全文搜索引擎的首选；它可以快速储存，搜索和分析海量数据。基本概念1,index(索引)动词：相当于mysql中的insert名词：相当于MySQL中的database2,Type(类型)在index(索引)中，可以定义一个或多个类型，类似于MySQL...
elasticsearch 多索引联合查询
09-23
### 回答1： 要实现 Elasticsearch 多索引联合查询，可以使用 Elasticsearch 的多索引查询功能。具体来说，可以使用 Elasticsearch 的 Multi-Search API 进行多个查询操作，然后将结果合并起来返回给用户。 以下是一个简单的示例代码，假设有两个索引 index1 和 index2，需要联合查询： ``` POST /_msearch {} {"index": "index1"} {"query": {"match_all": {}}} {} {"index": "index2"} {"query": {"match_all": {}}} ``` 上述代码中，`_msearch` 是 Multi-Search API，`index1` 和 `index2` 是要查询的两个索引，`match_all` 是一个简单的查询语句，表示匹配所有文档。查询结果会按照查询顺序依次返回，需要自行解析和处理。 需要注意的是，多索引联合查询可能会带来一些性能问题，特别是在大数据量场景下。因此，需要根据实际情况进行权衡和优化。 ### 回答2： Elasticsearch是一个分布式搜索引擎，可以用于存储、搜索和分析大规模的数据集合。在Elasticsearch中，我们可以使用多索引联合查询来实现对多个索引中的数据进行查询和分析。 多索引联合查询在Elasticsearch中非常常见和重要。当我们有多个索引，每个索引包含不同类型或字段的数据时，我们可以使用多索引联合查询来同时搜索这些索引，并获取跨多个索引的结果。 使用多索引联合查询的步骤如下： 1. 创建索引：首先，我们需要创建多个索引，并将不同类型或字段的数据分别存储在这些索引中。 2. 查询语句：在进行多索引联合查询之前，我们需要构建一个查询语句。查询语句可以使用Elasticsearch提供的查询DSL（Domain Specific Language）来编写，通过指定不同的索引名称、查询条件和过滤条件来实现。 3. 查询执行：一旦查询语句准备好，我们可以将其发送到Elasticsearch服务器进行查询执行。Elasticsearch会同时搜索多个索引，并返回跨多个索引的结果。 4. 结果处理：最后，我们可以对查询结果进行处理和分析。可以根据需要，对结果进行排序、筛选、聚合等操作。 多索引联合查询在实际的应用场景中非常有用。例如，当我们的数据被分散存储在不同的索引中，需要同时查询和分析这些数据时，我们可以使用多索引联合查询来快速获取所需的结果。 总结而言，Elasticsearch提供了多索引联合查询的功能，可以方便地搜索和分析跨多个索引的数据。通过构建查询语句、执行查询并处理结果，我们可以快速获取我们所需的数据。 ### 回答3： Elasticsearch是一种开源的分布式搜索引擎，它可用于实现全文搜索、日志分析、数据可视化和实时数据分析等功能。在Elasticsearch中，可以通过多索引联合查询来同时搜索多个索引并获取结果。 多索引联合查询可以通过以下几种方式实现： 1. 使用多个索引名称：可以在查询语句中指定多个索引名称，用逗号分隔。例如，可以使用以下语句同时查询index1和index2两个索引： GET index1,index2/_search { "query": { "match": { "field": "value" } } } 2. 使用通配符查询多个索引：可以使用通配符在查询语句中匹配多个索引名称。例如，可以使用以下语句查询所有以"index"开头的索引： GET index*/_search { "query": { "match": { "field": "value" } } } 3. 使用别名查询多个索引：在创建索引时，可以为索引设置一个别名，然后在查询中使用别名来查询多个索引。例如，可以使用以下语句创建两个索引并为它们设置别名： PUT index1/_alias/myalias PUT index2/_alias/myalias 然后，可以使用以下语句查询myalias别名所对应的索引： GET myalias/_search { "query": { "match": { "field": "value" } } } 多索引联合查询可以帮助我们在一个请求中同时搜索多个索引，提高查询效率和性能。在进行多索引联合查询时，需要注意索引之间的数据结构和映射是否一致，以保证查询结果的准确性和一致性。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值