Elasticsearch入门基础知识（一）

最新推荐文章于 2024-07-03 10:21:34 发布
最新推荐文章于 2024-07-03 10:21:34 发布
阅读量466 收藏 3
点赞数 1
分类专栏： elasticsearch 文章标签： elasticsearch
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/summerZBH123/article/details/85019646
版权

不介绍安装方式，主要是用来记录在学习elasticsearch时的一些基础入门命令和CRUD操作。

以下的例子，都是经过测试的，本文的例子使用的时kibana工具来进行测试

1、检查elasticsearch是否启动成功

http://localhost:9200/?pretty

会返回当前elasticsearch的服务名称，版本号等相关信息

2、查看当前elasticsearch的状态信息

GET /_cat/health?v

会返回当前服务的状态索引，elasticsearch使用几个颜色状态来表示集群的状态

green:每个索引的primary shard 和replica shard 都是active

yellow:每个索引的primary shard都是active，但是部分replica shard处于不可用状态

red:不是所有的primary shard都是active 状态

Q：为什么我们本地服务状态是yellow的？

A:当前电脑上启动了一个es进程，相当于只有一个node。es当中只有一个index，是kibana内置的index。由于默认的配置是给每个index分配5个primary shard 和replica shard,而且primary shard 和 replica shard不能在同一台机器上。目前kibana自己创建的index是一个primary shard和一个replica shard 。而我们当前机器上只有一个node,所以只有一个primary shard 被分配了，replica shard 没有第二台机器去启动。

3、GET /_cat/indices/?v

查看当前机器上有哪些索引

基础信息的CRUD操作

1、创建商品信息 put命令，如果索引，type不存在，则创建

PUT /test_index1/test_type1/1
{
  "name":"test",
  "age":12,
  "date":"2018-10-11"
}
返回结果：
{
  "_index" : "test_index1",
  "_type" : "test_type1",
  "_id" : "1",
  "_version" : 1,
  "result" : "created",
  "_shards" : {
    "total" : 2,
    "successful" : 1,
    "failed" : 0
  },
  "_seq_no" : 0,
  "_primary_term" : 1
}

2、查询信息

使用get命令，根据index/type/id的方式，可以精确查询到具体的数据

GET /test_index1/test_type1/1

返回结果
{
  "_index" : "test_index1",
  "_type" : "test_type1",
  "_id" : "1",
  "_version" : 1,
  "found" : true,
  "_source" : {
    "name" : "test",
    "age" : 12,
    "date" : "2018-10-11"
  }
}

3、修改信息

使用put命令

PUT /test_index1/test_type1/1
{
  "tags":"test1",
  "brand":"no",
  "price":12
}

执行结果：
{
  "_index" : "test_index1",
  "_type" : "test_type1",
  "_id" : "1",
  "_version" : 2,
  "result" : "updated",
  "_shards" : {
    "total" : 2,
    "successful" : 1,
    "failed" : 0
  },
  "_seq_no" : 1,
  "_primary_term" : 1
}

需要注意的是版本号加一，并且put命令会把原来的所有属性都替换掉，数据当中是当前显示的所有put当中的内容，在实际开发使用这个命令需要慎重，

4、只更新部分字段

post命令只更新部分字段，注意其格式

POST /test_index1/test_type1/1/_update
{
  "doc": {
    "name":"wozaiceshi"
  }
}
---------返回结果---------
{
  "_index" : "test_index1",
  "_type" : "test_type1",
  "_id" : "1",
  "_version" : 3,
  "result" : "updated",
  "_shards" : {
    "total" : 2,
    "successful" : 1,
    "failed" : 0
  },
  "_seq_no" : 2,
  "_primary_term" : 1
}

5、删除命令

格式 delete /index/type/id

DELETE /test_index1/test_type1/1
--------------返回结果-----------
{
  "_index" : "test_index1",
  "_type" : "test_type1",
  "_id" : "1",
  "_version" : 4,
  "result" : "deleted",
  "_shards" : {
    "total" : 2,
    "successful" : 1,
    "failed" : 0
  },
  "_seq_no" : 3,
  "_primary_term" : 1
}

注意这里在删除时，版本号也是会加一，es并不会在此刻立即删除数据，后面会介绍es的删除逻辑

多种方式的查询

1、查询所有商品信息

格式 GET /index/type/_search

GET /ecommerce/product/_search

返回结果

{
  "took" : 49,
  "timed_out" : false,
  "_shards" : {
    "total" : 5,
    "successful" : 5,
    "skipped" : 0,
    "failed" : 0
  },
  "hits" : {
    "total" : 3,
    "max_score" : 1.0,
    "hits" : [
      {
        "_index" : "ecommerce",
        "_type" : "product",
        "_id" : "2",
        "_score" : 1.0,
        "_source" : {
          "name" : "jiajieshi yagao",
          "desc" : "youxiao fangzhu",
          "price" : 25,
          "producer" : "jiajieshi producer",
          "tags" : [
            "fangzhu"
          ]
        }
      },

对于search的返回结果

took:表示本次查询耗费的时间，49毫秒

timed_out:表示是否超时，false未超时

shards:表示分片信息，total表示总共5个分片，成功了5个

hits:表示的本次查询的结果信息，total表示查询总数，max_score:score的含义，就是document对于一个search的相关度的匹配分数，越相关，就越匹配，分数也高

如果想要在search的基础上进行条件的筛选，可以使用如下命令

GET /ecommerce/product/_search?q=name:yagao&sort=price:desc

这种方式的查询在实际开发当中使用的不多，主要是在进行相关数据的查询时，用于快速查询

2、复杂条件下的查询条件

查询所有信息

GET /ecommerce/product/_search
{
  "query": { "match_all": {} }
}

结合一些条件的查询

GET /ecommerce/product/_search
{
    "query" : {
        "match" : {
            "name" : "yagao"
        }
    },
    "sort": [
        { "price": "desc" }
    ]
}

分页查询：

GET /ecommerce/product/_search
{
  "query": { "match_all": {} },
  "from": 1,
  "size": 1
}

  from 和size 类似于mysql当中的 limit m,n 查询

查询结果只返回特定的filed字段，添加_source，筛选列

GET /ecommerce/product/_search
{
  "query": { "match_all": {} },
  "_source": ["name", "price"]
}

3、query fileter

查询名称等于牙膏，并且价格大于25的商品信息，注意和上述只筛选名称的区别

GET /ecommerce/product/_search
{
    "query" : {
        "bool" : {
            "must" : {
                "match" : {
                    "name" : "yagao" 
                }
            },
            "filter" : {
                "range" : {
                    "price" : { "gt" : 25 } 
                }
            }
        }
    }
}

4、全文检索

GET /ecommerce/product/_search
{
    "query" : {
        "match" : {
            "producer" : "yagao producer"
        }
    }
}

注意，producer这个字段会被拆解，建立倒排索引

对于上述的筛选条件，会被拆分成yagao producer ---> yagao和producer，进行索引匹配

5、短语检索

和上述全文检索不同的是，短语检索不会进行拆分，会对某个连续的字段进行检索

GET /ecommerce/product/_search
{
    "query" : {
        "match_phrase" : {
            "producer" : "yagao producer"
        }
    }
}

------
为查询到数据

聚合搜索

聚合搜索的理解就是类似于mysql当中的group by ,已经count, avg函数的使用

1、根据tags进行分组查询

aggs是es的一个分组标签，group_by_tags是我自己定义的名称，terms是es的标签，

需要注意的是，在使用tags进行分组查询之前，需要设置这个tags的属性，将文本内容的fielddata设置为true，只有在开启之后，才能进行使用，否则会报错

PUT /ecommerce/_mapping/product
{
  "properties": {
    "tags": {
      "type": "text",
      "fielddata": true
    }
  }
}

以下截取了部分的分组信息

GET /ecommerce/product/_search
{
  "aggs": {
    "group_by_tags": {
      "terms": {
        "field": "tags"
      }
    }
  }
}

----------查询结果--------------
"aggregations" : {
    "group_by_tags" : {
      "doc_count_error_upper_bound" : 0,
      "sum_other_doc_count" : 0,
      "buckets" : [
        {
          "key" : "fangzhu",
          "doc_count" : 2
        },
        {
          "key" : "meibai",
          "doc_count" : 1
        },
        {
          "key" : "qingxin",
          "doc_count" : 1
        }
      ]
    }
  }

2、对于名称当中包含yahao的商品，按照tags进行过滤操作

即先进行条件过滤，在进行分组查询

GET /ecommerce/product/_search
{
  "query": {
    "match": {
      "name": "yangao"
    }
  },
  "aggs": {
    "all_tags": {
      "terms": {
        "field": "tags"
      }
    }
  }
}
----------返回结果
{
  "took" : 3,
  "timed_out" : false,
  "_shards" : {
    "total" : 5,
    "successful" : 5,
    "skipped" : 0,
    "failed" : 0
  },
  "hits" : {
    "total" : 3,
    "max_score" : 0.2876821,
    "hits" : [
      {
        "_index" : "ecommerce",
        "_type" : "product",
        "_id" : "2",
        "_score" : 0.2876821,
        "_source" : {
          "name" : "jiajieshi yagao",
          "desc" : "youxiao fangzhu",
          "price" : 25,
          "producer" : "jiajieshi producer",
          "tags" : [
            "fangzhu"
          ]
        }
      },
      {
        "_index" : "ecommerce",
        "_type" : "product",
        "_id" : "1",
        "_score" : 0.2876821,
        "_source" : {
          "name" : "gaolujie yagao",
          "desc" : "gaoxiao meibai",
          "price" : 30,
          "producer" : "gaolujie producer",
          "tags" : [
            "meibai",
            "fangzhu"
          ]
        }
      },
      {
        "_index" : "ecommerce",
        "_type" : "product",
        "_id" : "3",
        "_score" : 0.2876821,
        "_source" : {
          "name" : "zhonghua yagao",
          "desc" : "caoben zhiwu",
          "price" : 40,
          "producer" : "zhonghua producer",
          "tags" : [
            "qingxin"
          ]
        }
      }
    ]
  },
  "aggregations" : {
    "all_tags" : {
      "doc_count_error_upper_bound" : 0,
      "sum_other_doc_count" : 0,
      "buckets" : [
        {
          "key" : "fangzhu",
          "doc_count" : 2
        },
        {
          "key" : "meibai",
          "doc_count" : 1
        },
        {
          "key" : "qingxin",
          "doc_count" : 1
        }
      ]
    }
  }
}

3、先进行分组，再计算每个分组下的商品平均价格

es提供了avg函数来计算平均值

GET /ecommerce/product/_search
{
  "aggs": {
    "group_by_terms": {
      "terms": {
        "field": "tags"
      },
      "aggs": {
        "avg_price": {
          "avg": {
            "field": "price"
          }
        }
      }
    }
  }
}
--------结果---------------
{
  "took" : 47,
  "timed_out" : false,
  "_shards" : {
    "total" : 5,
    "successful" : 5,
    "skipped" : 0,
    "failed" : 0
  },
  "hits" : {
    "total" : 3,
    "max_score" : 1.0,
    "hits" : [
      {
        "_index" : "ecommerce",
        "_type" : "product",
        "_id" : "2",
        "_score" : 1.0,
        "_source" : {
          "name" : "jiajieshi yagao",
          "desc" : "youxiao fangzhu",
          "price" : 25,
          "producer" : "jiajieshi producer",
          "tags" : [
            "fangzhu"
          ]
        }
      },
      {
        "_index" : "ecommerce",
        "_type" : "product",
        "_id" : "1",
        "_score" : 1.0,
        "_source" : {
          "name" : "gaolujie yagao",
          "desc" : "gaoxiao meibai",
          "price" : 30,
          "producer" : "gaolujie producer",
          "tags" : [
            "meibai",
            "fangzhu"
          ]
        }
      },
      {
        "_index" : "ecommerce",
        "_type" : "product",
        "_id" : "3",
        "_score" : 1.0,
        "_source" : {
          "name" : "zhonghua yagao",
          "desc" : "caoben zhiwu",
          "price" : 40,
          "producer" : "zhonghua producer",
          "tags" : [
            "qingxin"
          ]
        }
      }
    ]
  },
  "aggregations" : {
    "group_by_terms" : {
      "doc_count_error_upper_bound" : 0,
      "sum_other_doc_count" : 0,
      "buckets" : [
        {
          "key" : "fangzhu",
          "doc_count" : 2,
          "avg_price" : {
            "value" : 27.5
          }
        },
        {
          "key" : "meibai",
          "doc_count" : 1,
          "avg_price" : {
            "value" : 30.0
          }
        },
        {
          "key" : "qingxin",
          "doc_count" : 1,
          "avg_price" : {
            "value" : 40.0
          }
        }
      ]
    }
  }
}

4、计算每个tags下的商品平均价格，并按照价格进行降序排序

GET /ecommerce/product/_search
{
  "aggs": {
    "group_by_terms": {
      "terms": {
        "field": "tags",
        "order": {
          "avg_price": "desc"
        }
      },
      "aggs": {
        "avg_price": {
          "avg": {
            "field": "price"
          }
        }
      }
    }
  }
}
--------返回结果------------
{
  "took" : 12,
  "timed_out" : false,
  "_shards" : {
    "total" : 5,
    "successful" : 5,
    "skipped" : 0,
    "failed" : 0
  },
  "hits" : {
    "total" : 3,
    "max_score" : 1.0,
    "hits" : [
      {
        "_index" : "ecommerce",
        "_type" : "product",
        "_id" : "2",
        "_score" : 1.0,
        "_source" : {
          "name" : "jiajieshi yagao",
          "desc" : "youxiao fangzhu",
          "price" : 25,
          "producer" : "jiajieshi producer",
          "tags" : [
            "fangzhu"
          ]
        }
      },
      {
        "_index" : "ecommerce",
        "_type" : "product",
        "_id" : "1",
        "_score" : 1.0,
        "_source" : {
          "name" : "gaolujie yagao",
          "desc" : "gaoxiao meibai",
          "price" : 30,
          "producer" : "gaolujie producer",
          "tags" : [
            "meibai",
            "fangzhu"
          ]
        }
      },
      {
        "_index" : "ecommerce",
        "_type" : "product",
        "_id" : "3",
        "_score" : 1.0,
        "_source" : {
          "name" : "zhonghua yagao",
          "desc" : "caoben zhiwu",
          "price" : 40,
          "producer" : "zhonghua producer",
          "tags" : [
            "qingxin"
          ]
        }
      }
    ]
  },
  "aggregations" : {
    "group_by_terms" : {
      "doc_count_error_upper_bound" : 0,
      "sum_other_doc_count" : 0,
      "buckets" : [
        {
          "key" : "qingxin",
          "doc_count" : 1,
          "avg_price" : {
            "value" : 40.0
          }
        },
        {
          "key" : "meibai",
          "doc_count" : 1,
          "avg_price" : {
            "value" : 30.0
          }
        },
        {
          "key" : "fangzhu",
          "doc_count" : 2,
          "avg_price" : {
            "value" : 27.5
          }
        }
      ]
    }
  }
}

5、先按照价格区间进行分组，组内数据按照tag进行分组，最后计算每组的价格

GET /ecommerce/product/_search
{
  "aggs": {
    "group_by_price": {
      "range": {
        "field": "price",
        "ranges": [
          {
            "from": 0,
            "to": 20
          },
          {
            "from": 20,
            "to":40
          },
          {
            "from": 40,
            "to":60
          }
        ]
      },
      "aggs": {
        "group_by_tags": {
          "terms": {
            "field": "tags"
          },
          "aggs": {
            "avg_price": {
              "avg": {
                "field": "price"
              }
            }
          }
        }
      }
    }
  }
}

 

summerZBH123
关注
  • 1
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Elasticsearch基础入门
juziding的博客
03-14 3114
简介 The Elastic Stack, 包括 Elasticsearch、 Kibana、 Beats 和 Logstash（也称为 ELK Stack）。能够安全可靠地获取任何来源、任何格式的数据，然后实时地对数据进行搜索、分析和可视化。 Elaticsearch，简称为 ES， ES 是一个开源的高扩展的分布式全文搜索引擎， 是整个 ElasticStack 技术栈的核心。 它可以近乎实时的存储、检索数据；本身扩展性很好，可以扩展到上百台服务器，处理 PB 级别的数据。 入门 官方网址
Elasticsearch入门知识介绍
qq_20395245的博客
01-16 164
在学习Elesticsearch之前，需要先了解一下Elesticsearch的相关介绍，在学习了学院的教学视频之后，本文罗列总结涉及到的基础知识，希望有所帮助。 一.什么是Elesticsearch？ ElasticSearch是一个分布式，高性能、高可用、可伸缩的搜索和分析系统。 怎么理解这个概念呢，首先让我们先从“搜索”开始，对比一下百度搜索和数据库搜索的差异。假设我们要搜索一个“小米手机专用券”： （1）数据库搜索：通过查询语句，搜索“小米手机专用券”关键字，但是会存在数据量过百万或亿级时性
Elasticsearch 搜索数据基本用法
wushizhezhe的博客
01-09 1万+
深入搜索编辑 在 基础入门 中涵盖了基本工具并对它们有足够详细的描述，这让我们能够开始用 Elasticsearch 搜索数据。 用不了多长时间，就会发现我们想要的更多：希望查询匹配更灵活，排名结果更精确，不同问题域下搜索更具体。 想要进阶，只知道如何使用 match 查询是不够的，我们需要理解数据以及如何能够搜索到它们。本章会解释如何索引和查询我们的数据让我们能利用词的相似度
ElasticSearch查询
weixin_44614454的博客
07-19 331
这里写目录标题一.空搜索二.多索引，多类型三.分页四.精确值查找4.1 term 查询数字4.2 term查询文本 一.空搜索 搜索API的最基础的形式是没有指定任何查询的空搜索，它简单地返回集群中所有索引下的所有文档 GET /_search { "hits" : { "total" : 14, "hits" : [ { "_index": "us", "_type": "tweet",
elasticsearch常见属性单词解释
铁柱的博客
04-08 1442
一、前言       说实话，刚测试ES的时候，我的内心是崩溃的，好多单词都不知道代表什么意思，只能一边测试，一边查询。看到就赶紧记下来，一天下来，也算是学的七七八八吧。这里分享给大家。 二、ES常见单词解释 1、url请求中的参数： curl -XPOST 'localhost:9200/bank/type1/_search?prett...
Elasticsearch：如何在搜索时得到精确的总 hits 数
roakcom的博客
01-05 1148
这里面提到：某个查询条件下的total hits是不准确的，因为它没有：visiting all matches。从 Elasticsearch 7.0之后，为了提高搜索的性能，在 hits 字段中返回的文档数有时不是最精确的数值。我们在请求的参数中加入 track_total_hits，并设置为true，那么我们可以看到在返回的参数中，它正确地显示了所有满足条件的文档个数。显然我们得到的文档的数目是10000个，但是它并不是我们的实际的满足条件的所有文档数。返回符合查询条件的文档数量，应该能满足需求。
Elasticsearch-基本操作1
weixin_30794851的博客
11-27 84
Elasticsearch版本：6.0一、文档一个文档不仅包含数据，也包含元数据，三个必须的元数据如下_index：具有共同特性分到一起的文档集合，标示了文档的存放位置； 名字小写，不以下划线开头，不包含逗号。_type：表示文档的类型，在索引中对数据进行逻辑分区； 名字大写或小写，不以下划线或句号开头，不包含逗号，并且长度限制256个字符。_id：文档的唯一标识，和_index和_t...
elasticsearch基础知识，从小白到入门
02-01
elasticsearch基础知识，从小白到入门 该资源仅供学习！！！ 该资源仅供学习！！！ 该资源仅供学习！！！ 该资源仅供学习！！！ 该资源仅供学习！！！
ElasticSearch入门和基础（高清视频教程）.rar
01-21
这个"**ElasticSearch入门和基础（高清视频教程）**"显然旨在为初学者提供一个全面了解和学习Elasticsearch的平台。在视频教程中，你可能会学到以下几个关键知识点： 1. **Elasticsearch的基本概念**：包括其分布式...
Elasticsearch 6.1官方入门教程.rar
05-31
本文将基于"Elasticsearch 6.1官方入门教程.pdf"的内容，详细介绍Elasticsearch的基础知识、核心概念以及6.1版本的主要改进。 **一、Elasticsearch基础** 1. **安装与配置**：Elasticsearch的安装通常涉及下载最新...
最完整的Elasticsearch 基础教程
05-26
本教程将深入浅出地介绍Elasticsearch的基础知识，帮助初学者快速上手。 1. **Elasticsearch 概述** - Elasticsearch 是一个基于 Lucene 的分布式、RESTful 风格的搜索和数据分析引擎。 - 它的核心特性包括实时性...
《ElasticSearch入门到实战》电子书，从入门到进阶实战项目的教程文档，框架SpringBoot框架整合ES.zip
02-28
**Elasticsearch 入门与实战** Elasticsearch 是一个基于 Lucene 的开源全文搜索引擎，以其分布式、可扩展性、实时搜索以及强大的数据分析能力而受到广泛欢迎。它不仅支持文本搜索，还可以处理结构化和非结构化数据...
elasticsearch 基础 —— Inner hits
gmHappy
09-18 1万+
Inner hits The parent-join and nested 功能允许返回具有不同范围匹配的文档。在父/子案例中，基于子文档中的匹配返回父文档，或者基于父文档中的匹配返回子文档。在嵌套的情况下，基于嵌套内部对象中的匹配返回文档。 在这两种情况下，隐藏了导致文档返回的不同范围中的实际匹配。在许多情况下，知道哪些内部嵌套对象（在嵌套的情况下）或子/父文档（在父/子的情况下）返回某些信息...
elasticsearch 深入 —— Top Hits Aggregation
热门推荐
gmHappy
09-19 2万+
Top Hits Aggregation top_hits指标聚合器跟踪正在聚合的最相关文档。 此聚合器旨在用作子聚合器，以便可以按桶聚合最匹配的文档。 top_hits聚合器可以有效地用于通过桶聚合器按特定字段对结果集进行分组。 一个或多个存储桶聚合器确定结果集被切入的属性。 选项 from - 要获取的第一个结果的偏移量。 size - 每个桶返回的最大匹配匹配数的最大数量。默认情况下...
Elasticsearch（十一）elasticsearch搜索--最基本的工具
CC-lady的博客
11-29 8467
我们已经学会了如何使用 Elasticsearch 作为一个简单的 NoSQL 风格的分布式文档存储系统。我们可以将一个 JSON 文档扔到 Elasticsearch 里，然后根据 ID 检索。但 Elasticsearch 真正强大之处在于可以从无规律的数据中找出有意义的信息——从“大数据”到“大信息”。
ElasticSearch 实践
z69183787的专栏
04-10 1524
版本：2.3.5 版本：5.3.0 （应为3.X，随ELK版本统一，故从5.X 开始） Windows端 1、官网下载 https://www.elastic.co/downloads/past-releases/elasticsearch-2-3-5 2、安装head插件 进入目录E:\elasticsearch-2.3.5\bin> 执行 plugin.bat inst...
Git 操作总结
最新发布
weixin_40134371的博客
07-03 966
Git 操作总结
Elasticsearch入门讲解
03-28
这篇《Elasticsearch入门讲解》是学习Elasticsearch基础知识和实践操作的宝贵资料，适合初学者及希望深入理解Elasticsearch特性的读者。通过这篇教程，读者可以全面了解Elasticsearch的核心概念，并具备使用Elastic...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值