ElasticSearch6.X查询及相关基本操作

最新推荐文章于 2024-05-25 02:05:37 发布
最新推荐文章于 2024-05-25 02:05:37 发布
阅读量3.4k 收藏 8
点赞数 2
分类专栏： ElasticSearch 文章标签： ElasticSearch
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zhangjm123/article/details/85316200
版权

文章目录

ElasticSearch6.X查询及相关基本操作

基础概念

  • 索引：含有相同属性的文档集合
       相当于与SQL中database
  • 类型：索引可以定义一个或多个类型，文档必须属于一个类型
       相当于与SQL中table
  • 文档：文档是可以被索引的基本数据单位
       相当于与SQL中row

假设一个系统中有多个汽车，图书，家具 等等索引
图书索引，按类型分为科普，小说，心理，历史等等类型。
具体到每一本书籍就是文档，最小的存储单位

  • 分片：每个索引都有多个分片，每个分片是一个Lucene索引

  • 备份：拷贝一份分片就完成了分片的备份

RESTFul API

  • api基本格式 http://[ip]:[port]/[索引]/[类型] /[文档id]
  • 常用HTTP动词 GET/PUT/DELETE/POST

基本操作

索引的创建

url ：http://192.168.1.106:9200/people put

{
	"settings":{
		"number_of_shards": 3,
		"number_of_replicas":1
	},
	"mappings":{
		"man":{
			"properties":{
				"name":{
					"type":"text"
				},
				"country":{
					"type":"keyword"
				},
				"age":{
					"type":"integer"
				},
				"date":{
					"type":"date",
					"format":"yyyy-MM-dd HH:mm:ss||yyyy-MM-dd||epoch_millis"
				}
			}
		}
	}
}

创建索引类型
number_of_shards：指定分片数

number_of_replicas：指定副本数

插入

{
	"name":"盖伦",
	"country":"American",
	"age":20,
	"date":"1998-01-01"
}

插入成功返回

{
    "_index": "people",
    "_type": "man",
    "_id": "1",
    "_version": 1,
    "result": "created",
    "_shards": {
        "total": 2,
        "successful": 1,
        "failed": 0
    },
    "_seq_no": 0,
    "_primary_term": 1
}

此时用es head插件可以看出已经多出一条数据
在这里插入图片描述

{
	"name":"吕布",
	"country":"China",
	"age":20,
	"date":"1999-01-01"
}

插入成功返回

{
    "_index": "people",
    "_type": "man",
    "_id": "FAE5_mcBx_MQjeQ5a8AI",
    "_version": 1,
    "result": "created",
    "_shards": {
        "total": 2,
        "successful": 1,
        "failed": 0
    },
    "_seq_no": 0,
    "_primary_term": 1
}

此时系统会给_id 生成一个id

修改

直接修改

url：http://192.168.1.106:9200/people/man/1/_update post方式
数据
在这里插入图片描述

{
	"doc":{
		"name":"赵信"
	}
}

将“盖伦” 修改名称为“赵信“,成功之后返回

{
    "_index": "people",
    "_type": "man",
    "_id": "1",
    "_version": 2,
    "result": "updated",
    "_shards": {
        "total": 2,
        "successful": 1,
        "failed": 0
    },
    "_seq_no": 1,
    "_primary_term": 1
}

在这里插入图片描述

脚本修改

还可以用脚本修改:如把年龄增加10岁。

{
	"script":{
		"lang":"painless",
		"inline":"ctx._source.age += 10"
	}
}

{
    "_index": "people",
    "_type": "man",
    "_id": "1",
    "_version": 3,
    "result": "updated",
    "_shards": {
        "total": 2,
        "successful": 1,
        "failed": 0
    },
    "_seq_no": 2,
    "_primary_term": 1
}

在这里插入图片描述

{
	"script":{
		"lang":"painless",
		"inline":"ctx._source.age = params.age",
		"params":{
			"age":100
		}
	}
}

成功返回数据

{
    "_index": "people",
    "_type": "man",
    "_id": "1",
    "_version": 4,
    "result": "updated",
    "_shards": {
        "total": 2,
        "successful": 1,
        "failed": 0
    },
    "_seq_no": 3,
    "_primary_term": 1
}

在这里插入图片描述

删除

删除文档

url：http://192.168.1.106:9200/people/man/1 delete方式

删除name为“赵信”的文档，成功返回

{
    "_index": "people",
    "_type": "man",
    "_id": "1",
    "_version": 5,
    "result": "deleted",
    "_shards": {
        "total": 2,
        "successful": 1,
        "failed": 0
    },
    "_seq_no": 4,
    "_primary_term": 1
}

在这里插入图片描述

删除索引

url http://192.168.1.106:9200/people/ delete方式

查询

简单查询

首先初始化一些数据，创建索引book
put http://192.168.1.106:9200/book

{
	"settings":{
		"number_of_shards": 3,
		"number_of_replicas":1
	},
	"mappings":{
		"novel":{
			"properties":{
				"word_count":{
					"type":"integer"
				},
				"author":{
					"type":"keyword"
				},
				"title":{
					"type":"text"
				},
				"publish_date":{
					"type":"date",
					"format":"yyyy-MM-dd HH:mm:ss||yyyy-MM-dd||epoch_millis"
				}
			}
		}
	}
}

文档数据

{
	"author":"罗贯中",
	"title":"三国演义",
	"word_count":5000,
	"publish_date":"1995-01-10"
}

{
	"author":"陈寿",
	"title":"三国志",
	"word_count":10000,
	"publish_date":"2000-10-10"
}

{
	"author":"杰克",
	"title":"Java入门",
	"word_count":1000,
	"publish_date":"2010-01-10"
}

{
	"author":"bob",
	"title":"ElasticSearch菜谱",
	"word_count":2000,
	"publish_date":"2015-05-10"
}

{
	"author":"张三",
	"title":"ElasticSearch入门",
	"word_count":2000,
	"publish_date":"2015-05-10"
}

{
	"author":"张三",
	"title":"ElasticSearch精通",
	"word_count":2000,
	"publish_date":"2015-05-10"
}

{
	"author":"李四",
	"title":"ElasticSearch入门精通到放弃",
	"word_count":2000,
	"publish_date":"2015-05-10"
}

{
	"author":"王小波",
	"title":"黄金时代",
	"word_count":4000,
	"publish_date":"2000-07-10"
}

get http://192.168.1.106:9200/book/novel/1

{
    "_index": "book",
    "_type": "novel",
    "_id": "1",
    "_version": 1,
    "found": true,
    "_source": {
        "author": "罗贯中",
        "title": "三国演义",
        "word_count": 5000,
        "publish_date": "1995-01-10"
    }
}
条件查询
查询所有

post http://192.168.1.106:9200/book/_search
参数：

{
	"query":{
		"match_all":{}
	}
}
查询指定记录数
{
	"query":{
		"match_all":{}
	},
	"from":1,
	"size":1
}

{
    "took": 1,
    "timed_out": false,
    "_shards": {
        "total": 3,
        "successful": 3,
        "skipped": 0,
        "failed": 0
    },
    "hits": {
        "total": 8,
        "max_score": 1,
        "hits": [
            {
                "_index": "book",
                "_type": "novel",
                "_id": "4",
                "_score": 1,
                "_source": {
                    "author": "杰克",
                    "title": "Java入门",
                    "word_count": 1000,
                    "publish_date": "2010-01-10"
                }
            }
        ]
    }
}
关键字查询

post http://192.168.1.106:9200/book/_search

{
	"query":{
		"match":{
			"title":"三国"
		}
	}
}

显示带“三国”关键字的所有文档记录

{
    "took": 19,
    "timed_out": false,
    "_shards": {
        "total": 3,
        "successful": 3,
        "skipped": 0,
        "failed": 0
    },
    "hits": {
        "total": 2,
        "max_score": 3.0884533,
        "hits": [
            {
                "_index": "book",
                "_type": "novel",
                "_id": "2",
                "_score": 3.0884533,
                "_source": {
                    "author": "陈寿",
                    "title": "三国志",
                    "word_count": 10000,
                    "publish_date": "2000-10-10"
                }
            },
            {
                "_index": "book",
                "_type": "novel",
                "_id": "1",
                "_score": 1.3097504,
                "_source": {
                    "author": "罗贯中",
                    "title": "三国演义",
                    "word_count": 5000,
                    "publish_date": "1995-01-10"
                }
            }
        ]
    }
}
排序
{
	"query":{
		"match":{
			"title":"三国"
		}
	},
	"sort":[
		{
			"publish_date":{
				"order":"asc"
			}
		}
	]
}
聚合查询 aggs

post http://192.168.1.106:9200/book/_search

{
	"aggs":{
		"group_by_word_count":{
			"terms":{
				"field":"word_count"
			}
		}
	}
}

返回结果：

 "aggregations": {
        "group_by_word_count": {
            "doc_count_error_upper_bound": 0,
            "sum_other_doc_count": 0,
            "buckets": [
                {
                    "key": 2000,
                    "doc_count": 4
                },
                {
                    "key": 1000,
                    "doc_count": 1
                },
                {
                    "key": 4000,
                    "doc_count": 1
                },
                {
                    "key": 5000,
                    "doc_count": 1
                },
                {
                    "key": 10000,
                    "doc_count": 1
                }
            ]
        }
    }

多个聚合字段 terms
post http://192.168.1.106:9200/book/_search

{
	"aggs":{
		"group_by_word_count":{
			"terms":{
				"field":"word_count"
			}
		},
		"group_by_publish_date":{
			"terms":{
				"field":"publish_date"
			}
		}
	}
}

字段统计 stats
post http://192.168.1.106:9200/book/_search

{
	"aggs":{
		"static_word_count":{
			"stats":{
				"field":"word_count"
			}
		}
	}
}

返回结果

 "aggregations": {
        "static_word_count": {
            "count": 8,
            "min": 1000,
            "max": 10000,
            "avg": 3500,
            "sum": 28000
        }
    }

还有min，max等等聚合查询

{
	"aggs":{
		"static_word_count":{
			"min":{
				"field":"word_count"
			}
		}
	}
}

高级查询

  • 子条件查询：特定字段查询所指特定值
  • 复合条件查询：以一定的逻辑组合子条件查询

子条件查询query和filter

Query context

在查询过程中，除了判断文档是否满足条件外，ES还会计算一个_score来标识匹配的程度，旨在判断目标文档和条件查询匹配 有多好,匹配度。

  • 全文本查询：针对文本类型数据
  • 字段级别查询：针对结构化数据，如数字、日期等
模糊匹配
{
	"query":{
		"match":{
			"author":"张三"
		}
	}
}
习语匹配查询 match_phrase
{
	"query":{
		"match_phrase":{
			"title":"ElasticSearch入门"
		}
	}
}

结果

{
             "_index": "book",
              "_type": "novel",
              "_id": "5",
              "_score": 1.8012037,
              "_source": {
                  "author": "张三",
                  "title": "ElasticSearch入门",
                  "word_count": 2000,
                  "publish_date": "2015-05-10"
              }
          },
          {
              "_index": "book",
              "_type": "novel",
              "_id": "7",
              "_score": 1.147541,
              "_source": {
                  "author": "李四",
                  "title": "ElasticSearch入门精通到放弃",
                  "word_count": 2000,
                  "publish_date": "2015-05-10"
              }
          }
多个字段的匹配查询 multi_match

查询包含author和title都包含的“王小波”

{
	"query":{
		"multi_match":{
			"query":"王小波",
			"fields":["author","title"]
		}
	}
}

结果

            {
                "_index": "book",
                "_type": "novel",
                "_id": "9",
                "_score": 2.6694732,
                "_source": {
                    "author": "王小波",
                    "title": "王小波自传",
                    "word_count": 14000,
                    "publish_date": "2000-07-10"
                }
            },
            {
                "_index": "book",
                "_type": "novel",
                "_id": "8",
                "_score": 0.2876821,
                "_source": {
                    "author": "王小波",
                    "title": "黄金时代",
                    "word_count": 4000,
                    "publish_date": "2000-07-10"
                }
            }
字段级别的查询 term
{
	"query":{
		"term":{
			"author":"王五"
		}
	}
}
字段级别的查询 range

Integer类型查询

{
	"query":{
		"range":{
			"word_count":{
				"gte":1000,
				"lte":2000
			}
		}
	}
}

日期类型查询

{
	"query":{
		"range":{
			"publish_date":{
				"gt":"2015-01-01",
				"lte":"now"
			}
		}
	}
}
Filter context

在查询过程中，只判断改文档是否满足条件，只有Yes或者No

{
	"query":{
		"bool":{
			"filter":{
				"term":{
					"word_count":1000
				}
			}
		}
	}
}

结果

 {
  "_index": "book",
         "_type": "novel",
         "_id": "4",
         "_score": 0,
         "_source": {
             "author": "杰克",
             "title": "Java入门",
             "word_count": 1000,
             "publish_date": "2010-01-10"
         }
     }

复合查询

常用查询

  • 固定分数查询

    {
    	"query":{
    		"constant_score":{
    			"filter":{
    				"match":{
    					"title":"ElasticSearch"
    				}
    			},
    			"boost":2
    		}
    	}
    }

    boost:设定指定分数。

  • 布尔查询 或关系查询
    查询作者为“张三”或者标题是“ElasticSearch”的文档

    {
	"query":{
		"bool":{
			"should":[
				{
					"match":{
						"author":"张三"
					}
				},
				{
					"match":{
						"title":"ElasticSearch"
					}
				}
				
			]
		}
	}
}

    {
	"query":{
		"bool":{
			"must":[
				{
					"match":{
						"author":"张三"
					}
				},
				{
					"match":{
						"title":"ElasticSearch"
					}
				}
				
			]
		}
	}
}
你笑起来丿真好看
关注
  • 2
    点赞
  • 踩
  • 8
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
ES 基础 API 操作 6.x版本
刘李404not_found的博客
12-17 1028
文章目录基础概念RestFul API 格式基础 API 操作查看集群信息查看节点信息新增索引查看索引删除索引ES 查询语句导入数据查询方式使用查询字符串查询使用 json 格式查询匹配所有文档（match_all）匹配字段查询（match）匹配多字段查询（bool）且查询（bool must）或查询（bool should）指定区间内的数字或者时间（range）查询指定数量的数据（from，size） 基础概念 ES 主要的基础概念有：Node、Index、Type、Document、Field、shar
Java操作Elasticsearch6实现group by分组查询
Dream it Possible
11-18 7610
引言 通过上篇博客的总结，我们知道了在Elasticsearch6中count、distinct和count(distinct)方法的使用。本篇博客继续聚合查询的学习，也就是对应mysql中的group by的使用。 公共实体 对于下面要介绍的查询，返回结果为统一实体，代码如下： /** * 单个字段分组返回结果 * * @author : huzhiting * @date : 2020-11-18 15:02 */ @Data public class AggregationForOneDTO
ElasticSearch进阶：一文全览各种ES查询在Java中的实现
最新发布
2401_85192407的博客
05-25 340
select * from (select * from persons where sect = ‘明教’)) a where sex = ‘女’;searchSourceBuilder.query(QueryBuilders.termQuery(“sect.keyword”, “明教”));select max(age) from mytest.persons where sect = ‘明教’;// 按sect分组。
elasticsearch6实战教程学习笔记（三）-- 查询
Mauanx的博客
12-30 295
笔记来源→ B站学习视频：最新ElasticSearch6实战教程。 上篇：elasticsearch6实战教程学习笔记（二） 序号是视频序号，内容根据我的理解微调了。 上篇说到：（1）用脚本script增删改；（2）object类型的存储原理；（3）解析bulk批量插入中的metadata元数据；（4）解析_source元数据。 本篇打算总结一下视频中关于查询的部分。涉及的视频包括：...
Elasticsearch专栏-6.es基本用法-聚合查询
zjun1001的博客
05-02 4810
es聚合查询
JAVA操作 ElasticSearch6.x 查询(内含中文测试数据)
菜鸟逆袭之路
04-05 1311
ElasticSearch查询操作测试记录
基于elasticsearch 6.x的新闻搜索项目代码
07-17
在6.x版本中，Java High Level REST Client提供了对所有Elasticsearch RESTful API的封装，使得开发者可以用Java代码方便地执行索引、搜索、更新和删除等操作。通过这个客户端，我们可以轻松地将新闻数据存入Elastic...
java操作elasticsearch5.x的demo
08-08
通过Java API操作Elasticsearch 5.x，你可以实现对数据的索引、查询、更新和删除等基本操作，以及更复杂的聚合分析。在实际项目中，可以根据需求灵活组合使用这些API，构建高效的数据处理系统。记住，Elasticsearch...
Elasticsearch5.x Java API手册
06-14
Elasticsearch 5.x 版本的 Java API 手册是开发者进行 Elasticsearch 相关开发的重要参考资料。Elasticsearch 是一个流行的开源全文搜索引擎，广泛应用于数据检索、分析和实时数据存储。Java API 提供了与 Elastic...
阿里云Elasticsearch7.x jar包.zip
08-21
阿里云Elasticsearch 7.x版本是一个高度可扩展的开源全文搜索引擎，基于Lucene构建，设计用于处理大量数据并提供实时分析。Elasticsearch不仅是一个搜索引擎，还是一个数据分析和存储平台，广泛应用于日志分析、监控...
IK分词器elasticsearch-analysis-ik-7.17.16
12-24
这一版本的发布旨在提供最新的特性和性能优化，同时也解决了之前版本中可能存在的问题，确保了与Elasticsearch 7.x系列的兼容性。对于那些无法通过常规渠道获取更新的开发者来说，这个版本的提供尤为关键。 **依赖...
ElasticSearch6.x入门？看这一篇就够了
菜鸟逆袭之路
04-01 769
ES相关概念知识
搜索引擎Elasticsearch6.x 入门
woyaoxuexi10000nian的博客
04-29 212
搜索引擎Elasticsearch6.x 入门，对于全文搜索效果拔群，很好用的一个搜索框架 一、简介 基本组件： (1).索引（index）:文档容器，类似于关系型数据库中的库。索引名必须是小写字母。 (2).类型（type）:类型是索引内部的逻辑分区。其意义完全取决与用户需求，一个索引内部可定义多个类型。类似于关系型数据库中的表结构，字段。 (3).文档（document）:文档是...
Elasticsearch中的Term查询和全文查询
zwx900102的博客
07-06 4226
Term 查询和全文（match，match_phrase）查询有什么区别
ElasticSearch6.x 之基础查询
zhouzhiwengang的专栏
07-25 710
本文基于：ElasticSearch6.x 之JSON 数据导入（Windows平台）,完成相关索引创建和数据初始化导入。 基础查询之：term 查询 POST http://192.168.1.74:9200/website/blog/_search/ { "query": { "term": { "title": "字段" } } } 基础...
全文搜索引擎Elasticsearch6.x 入门
Ghost_02的博客
01-17 1万+
全文搜索的需求非常大。而开源的解决办法Elasricsearch（Elastic）就是一个非常好的工具。目前是全文搜索引擎的首选。    Elastic 的底层是开源的Lucene。Elastic提供了REST API的操作接口。是Lucene的扩展。底层依旧是索引，但是可以把大索引切成n片，放到不同的节点，所以就实现了分布式。也就理所当然的是读写负载均衡。此外，他还是一个分布式实时文档
ElasticSearch 6.x 学习笔记：18.复合查询
程裕强的专栏
01-18 3160
【这一节先占个坑，后面再更新】 https://www.elastic.co/guide/en/elasticsearch/reference/6.1/compound-queries.html Compound queries wrap other compound or leaf queries, either to combine their results and scores, to
ElasticSearch 6.x 学习笔记：31.Java API之词项查询
程裕强的专栏
02-21 3587
https://www.elastic.co/guide/en/elasticsearch/client/java-api/6.1/java-term-level-queries.html 1、term查询 Find documents which contain the exact term specified in the field specified. package cn....
ElasticSearch 6.x 学习笔记：12.字段类型
热门推荐
程裕强的专栏
01-12 3万+
12.1 字段类型概述 一级分类 二级分类 具体类型 核心类型 字符串类型 string,text,keyword 整数类型 integer,long,short,byte 浮点类型 double,float,half_float,scaled_floa
ElasticSearch搜索引擎教程实战篇
09-19
7. Elasticsearch7.x使用常用命令13：介绍了Elasticsearch常用的命令，包括索引创建、查询、更新和删除等操作。 8. Elasticsearch7.x使用IK分词插件15：详细介绍了如何安装和使用IK分词插件，以支持中文分词。 9. ...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值