ElasticSearch 你必须知道的事

最新推荐文章于 2024-07-11 10:32:17 发布
最新推荐文章于 2024-07-11 10:32:17 发布
阅读量160 收藏
点赞数
分类专栏： elasticsearch java 文章标签： elasticsearch 搜索引擎 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_31927785/article/details/72542250
版权
本文详细介绍了ElasticSearch的倒排索引、索引概念、RESTful接口操作，包括创建索引、文档查询、条件查询、分页、过滤字段、排序、多条件查询、范围查询、聚合查询等实战技巧，适合电商项目中的文档管理和搜索引擎应用。
摘要由CSDN通过智能技术生成

ElasticSearch强大文件检索能力，广泛用于文档和日志的，产品的全文检索的中。ElasticSearch的强大分组和统计功能，在一些电商项目也广泛使用的。

至于Es怎么安装的，我就不在这里赘述了。网上大量教程

1.倒排索引

所谓倒排索引，和我们关系型数据库的正向索引来说的，正向索引在我们关系数据库，我们通过索引定位到某一行从而查询到数据。

倒排索引，我们将关键字和文档id联系起来，从关键字定位索引的过程。刚好和我们在关系型数据库使用索引的方式刚好相反。从而也大大提高了查询效率

1.索引

索引是具有某些类似特征的文档集合。例如，您可以拥有店铺数据的索引，商品的一个索引以及订单数据的一个索引。

索引由名称标识（必须全部小写），此名称用于在对其中的文档执行索引，搜索，更新和删除操作时引用索引。相当于关系型数据库的数据库的概念。

ElasticSearch支持RESTful风格，数据查询操作，这里就用postMan做一些常见的操作,

在elasticSearch启动后，9300是作为通信接口，比如集群间通信和客户端的通讯用的。9200

则是一个http协议的数据交互端口

2.创建索引

localhost:9200/shop

创建索引我们一般用PUT请求，PUT请求支持幂等性

3.查询全部的索引

localhost:9200/_cat/indices?v

4.文档创建

文档的创建其实是向索引中添加数据的过程,一般会发送post请求

localhost:9200/shopping/_doc
{
    "title": "小米手机", 
    "category": "小米", 
    "images": "http:www.xiaomi.com.xm.jpg", 
    "price": 3999
}

执行结果如下

{
    "_index": "shopping",
    "_type": "_doc",
    "_id": "pmTvPoEBrGnxLZGrlllf",
    "_version": 1,
    "result": "created",
    "_shards": {
        "total": 2,
        "successful": 1,
        "failed": 0
    },
    "_seq_no": 0,
    "_primary_term": 1
}

从上面可以看出es为我们自动创建了id，这个id相当于主键

通常为了便于查询，要让Es给我创建自定义的id,只需要请求地址加上我们自定义id

localhost:9200/shopping/_doc/1001

5.文档查询

文档已经保存如何查询呢，还是发送get请求带上id，id 是之前我们创建数据指定的id,注意是get请求

localhost:9200/shopping/_doc/1001

查询索引下面的所有数据

localhost:9200/shopping/_doc/_search

 

6.全量修改

全量修改只给整个文档的一条数据全部修改

PUT:localhost:9200/shopping/_doc/1001

{
    "title": "华为手机", 
    "category": "小米", 
    "images": "http:www.xiaomi.com.xm.jpg", 
    "price": 4999
}

执行结果

{"_index":"shopping","_type":"_doc","_id":"1001","_version":2,"result":"updated","_shards":{"total":2,"successful":1,"failed":0},"_seq_no":2,"_primary_term":2}

局部修改，指的是修改文档中某一条数据中对象的某一个属性比如这里我修改的是title

localhost:9200/shopping/_update/1001
{
	"doc":{"title":"苹果手机"}
}

 我们看看查询结果

 6.数据的查询

1.条件查询

localhost:9200/shopping/_search
{
	"query":{
		"match":{
			"category":"小米"
		}
	}
}

7.分页查询

如果需要分页查询呢。

{
    "query":{
        "match":{
            "category":"小米"
        }
    },
    "from":0,
    "size":1
}

8.过滤字段

如果我们不需要那么的字段，比如说这里我不需要images，那么久可以用source：指定需要查询的字段

查询的语句是

{
	"query":{
		"match_all":{
			
		}
		
	},
	"from":0,
	"size":2,
	"_source":["title","category"]
	
}

执行结果如下

{
    "took": 4,
    "timed_out": false,
    "_shards": {
        "total": 1,
        "successful": 1,
        "skipped": 0,
        "failed": 0
    },
    "hits": {
        "total": {
            "value": 11,
            "relation": "eq"
        },
        "max_score": 1,
        "hits": [
            {
                "_index": "shopping",
                "_type": "_doc",
                "_id": "pmTvPoEBrGnxLZGrlllf",
                "_score": 1,
                "_source": {
                    "title": "小米手机",
                    "category": "小米"
                }
            },
            {
                "_index": "shopping",
                "_type": "_doc",
                "_id": "1001",
                "_score": 1,
                "_source": {
                    "title": "苹果手机",
                    "category": "小米"
                }
            }
        ]
    }
}

9.排序

如果我需要对price字段进行排序该怎么操作呢。

{
	"query":{
		"match_all":{
			
		}
		
	},
	"from":0,
	"size":2,
	"_source":["title","category","price"],
	"sort":{
		"price":{
			"order":"desc"
		}
	}
	
	
}

执行结果如下

{
    "took": 33,
    "timed_out": false,
    "_shards": {
        "total": 1,
        "successful": 1,
        "skipped": 0,
        "failed": 0
    },
    "hits": {
        "total": {
            "value": 11,
            "relation": "eq"
        },
        "max_score": null,
        "hits": [
            {
                "_index": "shopping",
                "_type": "_doc",
                "_id": "BdYWSYEBDBuwPp6uNC_q",
                "_score": null,
                "_source": {
                    "price": 6999,
                    "title": "苹果手机",
                    "category": "苹果"
                },
                "sort": [
                    6999
                ]
            },
            {
                "_index": "shopping",
                "_type": "_doc",
                "_id": "BtYYSYEBDBuwPp6uOi-y",
                "_score": null,
                "_source": {
                    "price": 6999,
                    "title": "苹果手机",
                    "category": "苹果"
                },
                "sort": [
                    6999
                ]
            }
        ]
    }
}

10.多条件查询

多条件与

多条件与的查询，即多个条件同时满足，比如说，我要查询条件为价格为2999的，并且品牌是小米的手机

{
	"query":{
		"bool":{
			"must":[{
				"match":{
					"category":"小米"
				}
			},{
				"match":{
					"price":2999
				}
			}
				
				]
		}
		
	},
	"from":0,
	"size":2,
	"_source":["title","category","price"],
	"sort":{
		"price":{
			"order":"desc"
		}
	}
	
	
}

查询结果如下，显然我们只命中一条记录

{
    "took": 21,
    "timed_out": false,
    "_shards": {
        "total": 1,
        "successful": 1,
        "skipped": 0,
        "failed": 0
    },
    "hits": {
        "total": {
            "value": 1,
            "relation": "eq"
        },
        "max_score": null,
        "hits": [
            {
                "_index": "shopping",
                "_type": "_doc",
                "_id": "AtYTSYEBDBuwPp6u0S_A",
                "_score": null,
                "_source": {
                    "price": 2999,
                    "title": "小米手机",
                    "category": "小米"
                },
                "sort": [
                    2999
                ]
            }
        ]
    }
}

多条件或

比如我想查询分类为华为或者小米的手机

{
	"query":{
		"bool":{
			"should":[{
				"match":{
					"category":"小米"
				}
			},{
				"match":{
					"category":"华为"
				}
			}]
		}
		
	}
}

11.范围查询

比如我要查询2999到4999的手机,这里我们需要用filter进行范围的过滤

{
	"query":{
		"bool":{
			"should":[{
				"match":{
					"category":"小米"
				}
			},{
				"match":{
					"category":"华为"
				}
			}],
			"filter":{
				"range":{
					"price":{
						"gt":5000
					}
				}
			}
			
		}
		
	}
}

12.聚合查询

当我们需要进行分组统计的时候，我们就需要用聚合查询了。用aggs

比如说我们所有的手机的价格进行分组统计

{
	"aggs":{
		"price_group":{  //名称随意命名
			"terms":{ 
				"field":"price" //分组字段
			}
		}
	},
	"size":0
}

查询结果如下：

{
    "took": 21,
    "timed_out": false,
    "_shards": {
        "total": 1,
        "successful": 1,
        "skipped": 0,
        "failed": 0
    },
    "hits": {
        "total": {
            "value": 12,
            "relation": "eq"
        },
        "max_score": null,
        "hits": []
    },
    "aggregations": {
        "price_group": {
            "doc_count_error_upper_bound": 0,
            "sum_other_doc_count": 0,
            "buckets": [
                {
                    "key": 3999,
                    "doc_count": 4
                },
                {
                    "key": 6999,
                    "doc_count": 4
                },
                {
                    "key": 5999,
                    "doc_count": 2
                },
                {
                    "key": 2999,
                    "doc_count": 1
                },
                {
                    "key": 4999,
                    "doc_count": 1
                }
            ]
        }
    }
}

【ElasticSearch】es 压缩 你的 数据
九师兄
06-22 1623
压缩很棒，使比原始尺寸更小的东西听起来很神奇，但这是可能的。我们从 WinRar、7Zip 或其他工具中了解到这一点。即使 Elasticsearch 具有压缩将在节点和客户端之间丢弃的数据的属性，这对于在处理来自 Elasticsearch 的大量响应时减少网络延迟非常有用。启用 HTTP/TCP 压缩处理压缩响应Elasticsearch 7.7 及以下Elasticsearch 7.8 及更高版本未来的 Elasticsearch 版本 7.9 和 8.0。
Elasticsearch 两种更新操作
荒的博客
01-23 2499
/** * 更新 * @throws IOException * @throws ExecutionException * @throws InterruptedException */ @Test public void update1() throws IOException, ExecutionException, Int...
ElasticSearch 实战：ES如何部分更新文档 (partial update的使用)
qq_33240556的博客
03-29 797
API实现文档的部分更新。部分更新允许您仅修改文档中的一些字段而无需替换整个文档。选项（在Elasticsearch 7.x及以上版本中推荐使用。的例子中，如果文档存在，则会执行更新脚本（这里假设脚本简单地将。关键字后面的对象包含了我们要修改的字段及其新的值。如果你想要在文档不存在时插入新文档，可以结合使用。字段设置为传入的新值），如果文档不存在，则会执行。在Elasticsearch中，可以使用。在上面的请求中，我们试图更新索引。在这条请求中，脚本会将文档中的。部分，插入一个全新的文档。
Elasticsearch之更新（全部更新和局部更新）
weixin_33705053的博客
11-14 2604
首先，明确一个概念，es包括全部更新和局部更新！ ES全部更新 　　ES可以使用PUT或者POST对文档进行更新(全部更新)，如果指定ID的文档已经存在，则执行更新操作。 比如，我这里，id=1文档存在，那么，就是es全部更新。 注意: 　　es执行更新操作的时候，ES首先将旧的文档标记为删除状态，然后添加新的文档，旧的文档不会立即消失，但是你也...
ElasticSearch中局部更新操作(工作笔记)
littlehow的专栏
09-20 1292
写在前面 相当于一个备忘录，感觉现在记忆不好了，自己做的过段时间可能就记不清楚了，所以写个笔记备忘一下 原文章链接 ES方面配置 需要在Elasticsearch的配置文件elasticsearch.yml中添加如下配置： script.engine.groovy.inline.update: on 功能实现 groovy脚本 car_target_id和item都为数组，在脚本中数据的...
19.Elasticsearch更新文档5---局部更新4---官方文档翻译
IT云清
05-31 2167
由于网上没有找到5.5版本的资料，很多资料都是2.x版本的，更新时语法差异较大，所以我这里翻译一下官方文档的这一部分内容。翻译时，示例代码均替换为我实践中的真实代码，这样确保了本文档的准确性。 - 本文版本：5.5 - 官方文档原文路径：Elasticsearch Reference [5.5] » Document APIs » Update API - 官方文档原文地址：点击跳转 以下...
elasticsearch 增删改查（CRUD）
archer的技术故事
03-17 1232
elasticsearch 增删改查（CRUD） 本文阅读前提： 1、已经安装了elasticsearch。可以参考：http://blog.csdn.net/wild46cat/article/details/62040347 2、已经安装了kibana。可以参考：http://blog.csdn.net/wild46cat/article/details/62881828 好，
ElasticSearch有些事你应该知道
AiT_Boy的博客
01-29 231
ES有些事你应该知道 1.是什么？ Elasticsearch 是一个实时的分布式存储、搜索、分析的引擎，并具有强大的模糊/相关性查询。 2.数据结构？ Term Dictionary：我们输入一段文字，Elasticsearch会根据分词器对我们的那段文字进行分词（也就是图上所看到的Ada/Allen/Sara…)，这些分词汇总起来我们叫做Term Dictionary。在Term Dictionary中的词由于是非常非常多的，所以我们会为其进行排序，等要查找的时候就可以通过二分来查，不需要遍历整个Te
关于 Elasticsearch 你想知道的
sixkery的博客
03-31 2696
一、ElasticSearch 简介 持续更新 ElasticSearch 是一个开源的高扩展的分布式全文检索引擎，它可以近乎实时的存储、检索数据，本身扩展性很好，可以扩展上百台服务器，处理 PB 级别数据。 Elasticsearch 也可以使用 Java 开发并使用 Lucene 作为其核心来实现所有索引和搜索的功能，但是它的目的是通过简单的 RESTFUL API 来隐藏 lucence 的复杂性，从而让全文搜索变得简单。 二、Docker 安装 Elasticsearch docker run
docker删除es数据_Elasticsearch删除数据操作，你必须知道的一些坑
weixin_39734646的博客
12-20 1210
​前两天有同事打电话问我，说ES删除数据有没有什么坑？​我当时就问，是删索引还是删索引里的数据？她回答说是删数据，我说查出这些数据直接删除就好了，没有什么坑。。。​后来想想，关于ES数据的删除，之前确实遇到过很多删除场景，如果真要说有没有所谓的坑，细想一下，还真有。​我维护过的ES集群最大规模是180多个节点，每天增量70亿条/10TB的日志数据，总容量2PB+，主要是提供各类日志的存储、检索和分...
【ES专题】ElasticSearch集群架构剖析_es集群
2401_84159688的博客
04-28 1056
诸如。
ElasticSearch7.x入门到案例实战教程
06-29
ElasticSearch是一个基于Lucene的搜索...搜索有没有对应的答案GitHub（开源代码管理），搜索上千亿行代码电商网站，检索商品通过理论和剖析原理的方式让你熟悉ElasticSearch技术，节省你的学习时间和提高你的学习效率。
elasticsearch-7.4.2
11-10
- 下载解压`elasticsearch-7.4.2`后，你需要根据自己的需求配置`elasticsearch.yml`配置文件，例如设置节点名称、集群名称、内存分配等。 - 插件的安装通常通过`bin/elasticsearch-plugin`命令行工具进行，添加...
elasticsearch 局部更新数据
weixin_33973609的博客
04-01 405
2019独角兽企业重金招聘Python工程师标准>>> ...
Elasticsearch 更新指定字段
最新发布
csdn565973850的博客
07-11 1398
讲述Elasticsearch更新索引指定字段操作
Spring Boot配置Elasticsearch6（缓存数据库）添加、查询、更新、删除数据操作
旭东怪的博客
07-30 4018
1ElasticSearch ElasticSearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎，基于RESTful web接口。Elasticsearch是用Java开发的，并作为Apache许可条款下的开放源码发布，是当前流行的企业级搜索引擎。设计用于云计算中，能够达到实时搜索，稳定，可靠，快速，安装使用方便。 我们建立一个网站或应用程序，并要添加搜索功能，但是想要完成搜索工作的创建是非常困难的。我们希望搜索解决方案要运行速度快，...
JS 变量的全局作用域、局部作用域、ES6块级作用域的区别
alokka的博客
03-13 2050
1.全局作用域 用 var 在全局（函数外）声明的所有变量，都具有全局作用域，即： 网页中所有脚本和函数均可使用。 var carName = " Volvo"; // 此处可调用 carName 变量 function myFunction() { // 函数内可调用 carName 变量 } 可以理解为： carName 是在全局作用域声明的全局变量，在任何地方都可以使用 /...
关于ElasticSearch的那些事
TheHighPriestess的博客
05-25 394
ElasticSearch相关概念： 小提示：目前市场上开放源代码的最好全文检索引擎工具包就属于 Apache 的 Lucene了。但是 Lucene 只是一个工具包，它不是一个完整的全文检索引擎。Lucene 的目的是为软件开发人员提供一个简单易用的工具包，以方便的在目标系统中实现全文检索的功能，或者是以此为基础建立起完整的全文检索引擎。目前以 Lucene 为基础建立的开源可用全文搜索引擎主要是 Solr 和 Elasticsearch。Solr 和 Elasticsearch 都是比较成熟的全文搜索引
ElasticSearch那些事儿（一）
Computer_hello的博客
07-05 476
开源的Elasticsearch （以下简称 Elastic）是目前全文搜索引擎的首选。它可以快速地储存、搜索和分析海量数据。维基百科、Stack Overflow、Github 都采用它。 最近在工作上使用到了Elasticsearch全文搜索引擎，打算系统学习一下，出一个系列相关的文章，欢迎大家一起讨论。 一、简介 ElasticSearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎，基于RESTful Web接口。同时Elasticsearch是用Java开发的
2024年大数据最全【ES专题】ElasticSearch集群架构剖析_es集群
kenzsoft的博客
05-02 447
诸如。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值