elasticsearch基本操作

最新推荐文章于 2024-03-15 20:07:38 发布
最新推荐文章于 2024-03-15 20:07:38 发布
阅读量161 收藏
点赞数
分类专栏： 中间件 文章标签： elasticsearch
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/xujingyiss/article/details/120234729
版权

本文记录一些 es 的基础查询。

目录

_cat系列

常用字段类型

操作索引 Index

操作文档 Document

analize分析

基本查询

bool查询(多条件查询)

聚合查询

_cat系列

所有命令后面的 "?v" 可不加，加了的话可以显示列名等信息。

# 检查集群健康状态
GET /_cat/health?v
# 查看节点信息
GET /_cat/nodes?v
# 查看索引信息
GET /_cat/indices?v
# 显示为索引配置的别名，包含过滤器、路由信息等
GET /_cat/aliases?v
# 显示每个节点分片的数量以及硬盘空间使用的情况
GET /_cat/allocation?v
# 显示master的IP和所在节点
GET /_cat/master?v
# 显示节点信息
GET /_cat/nodes?v
# 详细的描述了节点包含的分片信息
GET /_cat/shards?v

常用字段类型

在创建索引、文档前，有必要先了解下es中常用的字段类型

类型名称包含种类说明
字符串text：用于全文索引，搜索时会自动使用分词器进行分词再匹配
keyword：不分词，搜索时需要匹配完整的值
数值整型：byte、short、integer、long
浮点型：float、double
日期date

额外参数 format：对日期进行格式化。

例如："yyyy-MM-dd HH:mm:ss"

范围integer_range、long_range、float_range、double_range、date_range在插入/更新文档时，字段需要使用 json 形式
布尔        true、false
其他如对象、数组、ip等

操作索引 Index

# 【结构化】创建索引book，设定mappings、settings。
# 并给两个text类型的字段，设置ik分词器
PUT /book
{
	"settings":{
		"number_of_shards": 1,
		"number_of_replicas": 1
	},
	"mappings":{
		"properties":{
		  "author":{
				 "type": "keyword"
			},
			"title":{
				"type": "text",
				"analyzer": "ik_max_word", "search_analyzer": "ik_smart"
			},
			"description":{
				"type": "text",
				"analyzer": "ik_max_word", "search_analyzer": "ik_smart"
			},
			"price":{
			  "type": "double"
			},
			"words":{
			  "type": "integer"
			},
			"publish_date":{
				"type": "date",
				"format": "yyyy-MM-dd"
			},
			"is_deleted":{
			  "type": "boolean"
			}
		}
	}
}

# 删除索引
DELETE /book

# 查询索引信息,返回结果包含aliases、mappings、settings
GET /book
# 查看索引的mapping信息
GET /book/_mapping
# 查看索引的setting信息，里面包含了索引的分区数、副本数、创建时间等信息
GET /book/_settings
# 查看索引统计信息，包含文档数、占用存储空间等
GET /book/_stats

操作文档 Document

文档的增删改操作

操作文档的时候路径中需要增加 “_doc”！

# 一、创建文档。指定ID，可重复创建，会覆盖
PUT /book/_doc/5/
{
  "author":"丸山黄金",
  "title":"overlord 14卷",
  "description":"灭国的魔女",
  "price":"57",
  "word":1210000,
  "publish_date":"2019-08-20",
  "is_deleted":false
}

# 不可重复创建，当ID存在时会报错
POST /book/_doc/3/_create
{
  "author":"xjy",
  "title":"spring ioc源码",
  "price":"20",
  "word":42000
}

# 自动生成ID
POST /book/_doc
{
  "title":"Redis深度解析"
}

# 修改文档，可以使用POST或PUT
# PUT全量更新，写法跟创建一样。ID存在就是更新
PUT /book/_doc/1
{
	"author":"xujingyi",
	"price":20.5
}

# POST增量更新,必须要使用 POST 和 "_update"
POST /book/_doc/1/_update
{
  "doc":{
    "title":"Reids",
    "price":34.5
  }
}

# 按条件删除
POST /prometheusbeat-7.3.1/_delete_by_query
{
  "query": {
    "range": {
      "@timestamp": {
        "gte": "2021-09-15 08:41:00",
        "lte": "2021-09-15 08:42:00",
        "format": "yyyy-MM-dd HH:mm:ss"
      }
    }
  }
}

analize分析

# 分析字段的分词情况等
GET /book/_analyze
{
 "field": "title",
 "text": "Springboot源码解析"
}

基本查询

# 查询文档总数
GET /book/_count

# 一、主键查询
GET /book/_doc/1

# 根据ID列表查询，也可以是/book/_doc/_mget
GET /book/_mget
{
  "ids":[1,2]
}

# 查询全部
GET /book/_search

GET /book/_search
{
  "query": {
    "match_all": {}
  }
}

# 单个条件模糊查询 match
GET /book/_search
{
  "query": {
    "match": {
      "title": "spring源码"
    }
  }
}

# 普通match查询
GET /book/_search
{
  "query": {
    "match": {
      "title": {
        "query": "spring源码"
      }
    }
  }
}

# 查询大于某个时间区间的数据
GET /prometheusbeat-7.3.1/_search
{
  "query": {
    "range": {
      "@timestamp": {
        "gte": "2021-09-15 08:36:00",
        "lte": "now",
        "format": "yyyy-MM-dd HH:mm:ss"
      }
    }
  }
}

# 按复杂对象(json)中的字段进行查询
GET /prometheusbeat-7.3.1/_search
{
  "query": {
    "match": {
      "labels.job": "kube-state-metrics"
    }
  }
}

# 必须要有 minimum_should_match 个关键词匹配，才能查出来
GET /book/_search
{
  "query": {
    "match": {
      "title": {
        "query": "mybatis源码",
        "minimum_should_match": 2
      }
    }
  }
}

# 单个条件模糊查询，并限制返回的字段 _source
GET /book/_search
{
  "query": {
    "match": {
      "author": "丸山黄金"
    }
  },
  "_source": "title"
}

# 精确查找 term
# 注意：term用于数字、日期、keyword等类型时没问题，但是对于text类型，只能匹配到分词
GET /book/_search
{
  "query": {
    "term": {
      "price": "55"
    }
  }
}

# 多个字段中只要有一个跟搜索的字段匹配 multi_match
GET /book/_search
{
  "query": {
    "multi_match": {
      "query": "骑士",
      "fields":["title","description"]
    }
  }
}

# 给multi_match设置字段权重
GET /book/_search
{
  "query": {
    "multi_match": {
      "query": "骑士",
      "fields":["title^2","description"], 
      "tie_breaker": 0.3
    }
  }
}

# 一个字段中必须包含指定的多个分词
GET /book/_search
{
  "query": {
    "query_string": {
      "default_field": "title",
      "query": "ioc AND 源码"
    }
  }
}

# 分页查询 from & size
GET /book/_search
{
  "query": {
    "match_all": {}
  },
  "from": 0,
  "size": 2
}

# 排序 sort
GET /book/_search
{
  "query": {
    "match_all": {}
  },
  "sort": [
    {
      "price": {
        "order": "desc"
      }
    }
  ]
}

bool查询(多条件查询)

# 多条件查询 AND 效果，使用 must
GET /book/_search
{
  "query": {
    "bool": {
      "must": [
        {
          "match": {
            "title": "spring"
          }
        },{
          "match": {
            "description": "aop"
          }
        }
      ]
    }
  }
}

# 多条件查询 OR 效果，使用 should
GET /book/_search
{
  "query": {
    "bool": {
      "should": [
        {
          "match": {
            "title": "spring"
          }
        },{
          "match": {
            "description": "aop"
          }
        }
      ]
    }
  }
}

# 查询的结果必须【不包含】指定的条件
GET /book/_search
{
  "query": {
    "bool": {
      "must_not": [
        {
          "match": {
            "title": "spring"
          }
        }
      ]
    }
  }
}

# 范围查询 filter。可以和must与should结合使用。
# 不过要注意如何和should一起使用，当should没匹配时，filter仍然会发挥作用！
# gte和lte可以分开使用，以达到查询大于某值或者小于某值的效果
GET /book/_search
{
  "query": {
    "bool": {
      "filter": [
        {
          "range": {
            "price": {
              "gte": 50,
              "lte": 60
            }
          }
        }
      ]
    }
  }
}

# constant_score也可以配合filter使用，
# filter正常不会返回sorce，跟constant_score结合使用时，可以返回boost指定的score
# 注意：这里跟bool方式写法上有个不同点是，这里filter只有一个，而bool方式是一个数组
GET /book/_search
{
  "query": {
    "constant_score": {
      "filter": {
        "range": {
          "price": {
              "gte": 50,
              "lte": 60
            }
        }
      }, 
      "boost": 1.2
    }
  }
}

聚合查询

聚合查询类似于 mysql 中的 group by 以及一些函数，比如 sum、avg 等。

# 查询一个字段的最大值[max]。[min、avg、sum]也是同样用法
# 可以跟query结合使用，先过滤一部分数组，再做聚合!
GET /book/_search
{
  "aggs": {
    "max_price": {
      "max": {
        "field": "price"
      }
    }
  }
}

# 文档中某个值的个数 [value_count]，一般和其他聚合结合使用
GET /book/_search
{
  "aggs": {
    "price_count":{
      "value_count": {
        "field": "price"
      }
    }
  }
}

# 计算文档中某个字段值的非重复个数。注意返回的是个数。[cardinality]
GET /book/_search
{
  "aggs": {
    "price_distinct":{
      "cardinality": {
        "field": "price"
      }
    }
  }
}

# 计算某个字段的统计数据，返回它的[count、min、max、avg、sum]数值。[stats]
GET /book/_search
{
  "aggs": {
    "price_stats":{
      "stats": {
        "field": "price"
      }
    }
  }
}

# 根据某个字段进行分组，会返回组内元素的个数。 [terms]
GET /book/_search
{
  "aggs": {
    "author_terms":{
      "terms": {
        "field": "author",
        "size": 10
      }
    }
  }
}

# 和query结合使用，过滤后再做聚合
GET /book/_search
{
  "query": {
    "match": {
      "description": "好汉"
    }
  }, 
  "aggs": {
    "author_terms":{
      "terms": {
        "field": "author",
        "size": 5
      }
    }
  }
}

# 过滤聚合(filter Aggregation)
# 通常这将用于将当前聚合上下文缩小到一组特定的文档
GET /book/_search
{
  "aggs": {
    "author_terms": {
      "filter": {
        "match": {
          "title": "spring"
        }
      }, 
      "aggs": {
        "price_terms": {
          "avg": {
            "field": "price"
          }
        }
      }
    }
  }
}

# 范围聚合(Range Aggregation) [range]
GET /book/_search
{
  "aggs": {
    "price_ranges":{
      "range": {
        "field": "price",
        "ranges": [
          { "to": 50 },
          { "from": 50, "to": 100 },
          { "from": 100 }
        ]
      }
    }
  }
}

# 时间范围聚合(Date Range Aggregation) [date_range]
GET /book/_search
{
  "aggs": {
    "publish_date_range":{
      "date_range": {
        "field": "publish_date",
        "ranges": [
          { "to": "2017-08-20"},
          { "from": "2017-08-20", "to": "2019-08-20"},
          { "from": "2019-08-20"}
        ]
      }
    }
  }
}

# 按某查询条件查询，然后group by，最后sum
GET /prometheusbeat-7.3.1/_search
{
  "query": {
    "bool": {
      "must": [
        {
          "match": {
            "name": "container_cpu_usage_seconds_total"
          }
        },
        {
          "match": {
            "labels.container": "train-py-test"
          }
        }
      ]
    }
  }, 
  "aggs": {
    "group_by_time":{
      "terms": {
        "field": "@timestamp",
        "size": 100
      }
      ,"aggs": {
        "value_sum": {
          "sum": {
            "field": "value"
          }
        }
      }
    }
  }
}

# 聚合后按照原字段排序 [_term]
GET /prometheusbeat-7.3.1/_search
{
  "aggs": {
    "group_by_time":{
      "terms": {
        "field": "@timestamp",
        "order": {
          "_term": "asc"
        }, 
        "size": 100
      }
      ,"aggs": {
        "value_sum": {
          "sum": {
            "field": "value"
          }
        }
      }
    }
  }
}

# 聚合后按照计算出来的字段排序
GET /prometheusbeat-7.3.1/_search
{
  "aggs": {
    "group_by_time":{
      "terms": {
        "field": "@timestamp",
        "order": {
          "value_sum": "asc"
        }, 
        "size": 100
      }
      ,"aggs": {
        "value_sum": {
          "sum": {
            "field": "value"
          }
        }
      }
    }
  }
}

 先记到这吧，持续补充。。。。

xujingyiss
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
动手学习Elasticsearch中的Multi Match Query
weixin_33858336的博客
06-20 871
在Elasticsearch全文检索中，我们用的比较多的就是Multi Match Query，其支持对多个字段进行匹配。Elasticsearch支持5种类型的Multi Match，我们一起来深入学习下它们的区别。 5种类型的Multi Match Query 直接从官网的文档上摘抄一段来： best_fields: (default) Finds documents which m...
Elastic Search一些用法
qq_41787812的博客
11-09 1608
elastic search一些用法
【Elasticsearch 权威指南学习笔记】multi_match查询
深漂小码哥
07-12 815
multi_match查询为能在多个字段上反复执行相同查询提供了一种便捷方式。multi_match多匹配查询的类型有多种，其中的三种：best_fields、most_fields和cross_fields（最佳字段、多数字段、跨字段）。默认情况下，查询的类型是best_fields，这表示它会为每个字段生成一个match查询，然后将它们组合到dis_max查询的内部，如下： { "dis_max": { "queries": [ { ...
ElasticSearch第十篇：multi_match多字段查询以及wildcard模糊查询
不经意的博客
08-19 8397
1.multi_match multi_match查询提供了一个简便的方法用来对多个字段执行相同的查询，即对指定的多个字段进行match查询,其有三种类型， best_fields，most_fields以及cross_fields，默认为best_fields。 比如使用同一个查询关键字同时在company和place中查询: GET 51job/_doc/_search { "query": { "multi_match" : { "query"
ElasticSearch搜索API(下)
u011759340的博客
05-28 462
五 文本搜索 5.1 文本搜索简介 5.1.1　文本的索引建立过程 文档-词语矩阵建立完成之后，接着需要建立基于词语的倒排索引。ES会遍历文档词语矩阵中的每一个词语，然后将包含该词语的文档信息与该词语建立一种映射关系。映射关系中的词语集合叫作Term Dictionary，即“词典”。映射中的文档集合信息不仅包含文档ID，还包含词语在文档中的位置和词频信息，包含这些文档信息的结构叫作Posting List。对于一个规模很大的文档集合来说，可能包含几十万甚至上百万的词语集合，能否快速定位某个词语，直接影响搜
(狂神)ElasticSearch快速入门笔记，ElasticSearch基本操作以及爬虫(Java-ES仿京东实战)
04-18
(狂神)ElasticSearch快速入门笔记，ElasticSearch基本操作以及爬虫(Java-ES仿京东实战),包含了小狂神讲的东西，特别适合新手学习，笔记保存下来可以多看看。好记性不如烂笔头哦~，ElasticSearch，简称es，es是一个...
Elasticsearch基础操作
04-06
Elasticsearch基础操作
Spring Boot elasticsearch7.6.2基础操作：创建索引、新增数据、查询数据
04-29
以上就是使用Spring Boot和Elasticsearch 7.6.2进行基础操作的基本流程。通过这种方式，你可以轻松地在应用中集成Elasticsearch，实现高效的搜索功能。记住，Elasticsearch的强大还在于它的聚合分析、地理位置搜索等...
es操作文档，记录es8基本操作
最新发布
09-02
es操作文档，记录es8基本操作
elasticSearch的操作demo
02-19
最后，`es`包可能是Elasticsearch相关的操作接口或抽象类，它们定义了与Elasticsearch交互的方法，如添加、更新、删除文档，以及查询等。例如： ```java public interface ElasticsearchRepository { void save...
Elasticsearch语法知多少之Multi_match query
前者已逝，后者未至。
08-15 1440
掌握多匹配查询，包含对多匹配查询的类型分析和应用。
用elasticsearch聚合函数实现distinct查询
jsiostream的博客
02-14 1万+
1.等价的sql Sql代码 ： SELECT DISTINCT field1,field2 FROM test_index.test_type 等价于 Sql代码： SELECT field1,field2 FROM test_index.test_type GROUP BY field1,field2 Controller： 这是根据类型和传过来的可变字段key来查询 /** ...
ES多字段匹配查询时的权重控制
热门推荐
弹指天下
08-17 1万+
我们在使用ES进行查询时常常遇到这样的场景：需要根据用户输入的查询关键字同时去匹配多个字段，并且希望对匹配字段的权重做不同的设置，比如同时去匹配公司名称和公司简介，这里一般需要提升公司名称匹配的权重，这样得出的相关性评分才会更准确。 在ES中，我们可以通过boost参数来控制多字段查询的权重。
Elasticsearch启动脚本
ChauncyTan的博客
03-17 978
编写启动脚本 vim /etc/init.d/elasticsearch #!/bin/sh #chkconfig: 2345 80 05 #description: elasticsearch #processname: elasticsearch-7.1.1 export JAVA_HOME=/opt/jdk/jdk-11.0.2 export PATH=$JAVA_HOME...
ElasticSearch 看这一篇就够了，详解！！！
qq_63438013的博客
03-15 1132
可以在highlight中使用。
ElasticSearch详解
Tobenumerator的博客
08-31 1140
elasticsearch的倒排索引，索引库管理，映射，文档，域跟MySQL的对应关系和区别，属性详解，DLS的七种查询方式
ElasticSearch--聚合分析（group by, avg,sort等）
小毛贼_哪里逃
03-07 1504
分组聚合：以tag分组，并计算每个分组下的数量 GET accounts/person/_search { "size": 0, "aggs": {//aggregations的简写，聚集，集合 "group_by_tag": { "terms": { "field": "tag" } } } } 返回： { "t...
【ES】Elasticsearch的基本操作及相关概念-02
锥栗的博客
08-28 1234
前言 所有操作基于kibana的 devs tools，相关的安装可以看： 【ES学习】ElasticSearch MacOS版 安装与使用（图文教程） 【ES学习】ElasticSearch在Kibana的使用 Kibana安装（MacOS版） 本文承接【ES】Elasticsearch的基本操作及相关概念-01 先再加一个文档 PUT /megacorp/employee/4 { "first_name" : "Gang", "last_name" : "Xiao",
es query time gte lte
lijuqi的博客
01-11 4524
{ “query”: { “range”: { “time”: { “gte” :1484096300000, “lte”:1484096500000 } } } }
Elasticsearch基本操作
08-05
Elasticsearch是一个开源的分布式搜索和分析引擎，它可以用于存储、搜索和分析大量的数据。以下是一些Elasticsearch的基本操作： 1. 安装和启动Elasticsearch：首先，你需要从Elasticsearch官方网站下载和安装Elasticsearch。安装完成后，你可以使用命令行或者图形界面来启动Elasticsearch。 2. 创建索引：在Elasticsearch中，数据存储在索引中。你可以使用PUT请求来创建一个新的索引。例如，使用curl命令可以发送以下请求来创建一个名为"my_index"的索引： ``` curl -XPUT 'localhost:9200/my_index' ``` 3. 添加文档：一旦索引创建好了，你可以使用POST请求来向索引中添加文档。文档是以JSON格式表示的数据。以下是向名为"my_index"的索引添加一个文档的示例请求： ``` curl -XPOST 'localhost:9200/my_index/_doc' -d ' { "title": "Elasticsearch Basics", "content": "This is a basic introduction to Elasticsearch" }' ``` 4. 搜索文档：你可以使用GET请求来搜索索引中的文档。以下是一个搜索名为"my_index"的索引中包含关键字"elasticsearch"的文档的示例请求： ``` curl -XGET 'localhost:9200/my_index/_search?q=elasticsearch' ``` 5. 更新文档：使用POST请求可以更新索引中的文档。以下是更新名为"my_index"的索引中ID为1的文档的示例请求： ``` curl -XPOST 'localhost:9200/my_index/_doc/1/_update' -d ' { "doc": { "content": "This is an updated content" } }' ``` 6. 删除文档：使用DELETE请求可以删除索引中的文档。以下是删除名为"my_index"的索引中ID为1的文档的示例请求： ``` curl -XDELETE 'localhost:9200/my_index/_doc/1' ``` 这些是Elasticsearch的一些基本操作。你可以根据需要进一步探索和学习更多高级功能和API。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值