关于Elasticsearch

最新推荐文章于 2024-05-15 16:07:58 发布
最新推荐文章于 2024-05-15 16:07:58 发布
阅读量21 收藏
点赞数
文章标签： jenkins 运维
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/yifan_1001/article/details/132216580
版权

关于Elasticsearch

Elaticsearch是专门用于解决搜索问题的NoSQL的文档数据库。

无论使用哪种操作系统，只需要下载elasticsearch的压缩包并解压即可使用，需要注意，elasticsearch文件夹的各层级的父级文件夹的名称中不允许包含非ASCII码字符和空格！例如放在D盘根目录下：

执行bin目录下的elasticsearch即可启用Elasticsearch服务：

**注意：**在使用Elasticsearch的过程中，以上窗口不可关闭！

当启动成功后，你可以通过浏览器访问 http://localhost:9200.

elasticsearch提供了一套基于RESTful的访问，你可以使用任何一种可以提交REST请求的工具来访问elasticsearch及其中的数据，例如常见的测试工具PostMan等。

或者，你也可以在IntelliJ IDEA中，使用HTTP Request进行访问：

在HTTP Request文件中编写需要提交的请求，然后，点击左侧的运行图标即可发起请求

使用elasticsearch分词

Elasticsearch之所以能够高效处理搜索，是因为它会将你的数据进行“分词”处理，即将一段文本拆成若干个文本，在执行搜索时，会尝试检查是否匹配“拆”出来的某个文本。

向 http://localhost:9200/_analyze 提交请求即可分词，并且，请求中必须包含请求参数，参数名称固定为text，整个请求的格式大致如下：

 查询Elasticsearch的状态，通常用于检查Elasticearch是否可用
GET http://localhost:9200

提示：在同一个.http文件中，可以编写多个请求，但是，后续的请求的代码必须使用 ### 和前序的请求分开，不能只使用1个 #！

你也可以尝试对中文的句子进行分词，会发现，在默认情况下，Elasticsearch只能将中文中的每个字拆出来，并不能正确的处理各个词语！

示例代码：

### 测试分词 -- 中文
GET http://localhost:9200/_analyze
Content-Type: application/json

{
  "text": "很高兴认识你！"
}

可以在Elasticsearch中添加新的分词插件来解决以上问题，经典的中文分词插件就是ik分词器。

所有插件都应该放在Elasticsearch下的plugin文件夹下

你需要将下载得到的ik分词器的压缩包解压出来，将解压得到的文件夹放在plugins文件夹下，而ik分词器的文件夹名称就叫ik即可：

**注意：**完成后，需要重启Elasticsearch（关了再打开）才可以应用新添加的分词器！

接下来，你就可以使用IK分词器对中文的句子进行分词！你需要在请求参数中通过analyzer属性来指定分词器，取值可以是IK分词器提供的ik_smart或ik_max_word，例如：

### 测试分词 -- 中文 -- ik_smart
GET http://localhost:9200/_analyze
Content-Type: application/json

{
  "analyzer": "ik_smart",
  "text": "很高兴认识你！"
}

### 测试分词 -- 中文 -- ik_max_word
GET http://localhost:9200/_analyze
Content-Type: application/json

{
  "analyzer": "ik_max_word",
  "text": "很高兴认识你！"
}

使用IK分词器时，可以自造词！例如：
在config目录下，创建一个dic为后缀名的文本文档，写入自造词，然后在xml文档中添加该文档的配置，重启即可

Elasticsearch文档数据库的相关概念

索引（index / indices）

  • 相当于MySQL中的Database

类型（type / types）

  • 相当于MySQL中的Table，可以自行创建“类型”，或者，如果不关心“类型”，使用 _doc 表示类型名
  • ES本身并不注重“类型”的概念，甚至在较高版本（8.x或以上）基本已废弃此概念

文档（document / documents）

  • 相当于MySQL中各数据表中一行行的数据
  • 在ES中每个数据都是由JSON格式组织的

字段（field / fields）

  • 相当于MySQL中的Column

基于RESTful访问Elasticsearch

操作汇总

添加文档

添加文档（使用ES随机生成的ID值）

请求格式：

POST http://localhost:9200/{索引名}/{类型名}

提示：添加文档时，如果索引不存在，会自动创建索引，如果类型不存在，会自动创建类型！

请求示例：

### 添加文档
POST http://localhost:9200/index_crud/_doc
Content-Type: application/json

{
  "id": 998,
  "title": "2023新茶上市，赔本大甩卖",
  "sort": 188
}

添加文档（自行指定ID值）

请求格式：

PUT http://localhost:9200/{索引名}/{类型名}/{文档ID}

请求示例：

### 添加文档（自行指定ID值）
PUT http://localhost:9200/index_crud/_doc/Tea9527
Content-Type: application/json

{
  "id": 999,
  "title": "2023老茶上市，卖得也相当不错",
  "sort": 199
}

删除

根据ID删除文档

请求格式：

DELETE http://localhost:9200/{索引名}/{类型名}/{文档ID}

请求示例：

### 根据ID删除文档
DELETE http://localhost:9200/index_crud/_doc/Tea9527

提示：如果尝试删除的文档不存在，将响应404错误！

删除索引

请求格式：

DELETE http://localhost:9200/{索引名}

请求示例：

### 删除索引
DELETE http://localhost:9200/index_crud

提示：如果尝试删除的索引不存在，将响应404错误！

修改文档

修改文档（更新整篇文档）

请求格式：

PUT http://localhost:9200/{索引名}/{类型名}/{文档ID}

请求示例：

### 修改文档（更新整篇文档）
PUT http://localhost:9200/index_crud/_doc/Tea9527
Content-Type: application/json

{
  "id": 999,
  "title": "2023老茶上市，卖得也相当不错",
  "sort": 199,
  "description": "这个老茶味道很好，强烈推荐！"
}

注意：以上做法将使用请求参数替换原有的整篇文档！

修改文档（局部修改）

请求格式：

POST http://localhost:9200/{索引名}/{类型名}/{文档ID}/_update

请求参数：

{
	"doc": {
        需要更新的数据的参数
    }
}

请求示例：

### 修改文档（局部修改）
POST http://localhost:9200/index_crud/_doc/Tea9527/_update
Content-Type: application/json

{
  "doc": {
    "sort": 189,
    "description": "老茶和新茶味道还是挺不一样，要不，买个试试？"
  }
}

注意：如果请求参数中包含新的属性（原文档中没有的属性），也会更新成功，且在文档中新增新的属性！

查看文档

查看某个索引中的所有文档

请求格式

GET http://localhost:9200/{索引名}/_search

请求示例：

### 查看某个索引中的所有文档
GET http://localhost:9200/index_crud/_search

根据ID访问文档

请求格式

GET http://localhost:9200/{索引名}/{类型名}/{文档ID}

请求示例：

### 根据ID访问文档
GET http://localhost:9200/index_crud/_doc/yjEl3okBucTgSd_ILGK2

Elasticsearch中的数据类型

在Elasticsearch中，各字段的值也是有数据类型的，大致为：

  • 字符串类型：text、keyword
    • text类型在被处理时，默认会被分词
      • 默认
    • keyword类型在被处理时，默认不会被分词
  • 数值类型：byte、short、integer、long、float、double等
  • 布尔类型：boolean
  • 日期类型：date

例如，准备一些测试数据：

ID（id）标题（title）简介（description）排序序号（sort）售价（price）
1散装龙井好喝又实惠160300
2大红袍大礼包性价比之王190688
3龙井礼盒送礼必备130888
4精装陈年老普洱收藏珍品150988
5精装铁观音大礼包家中常备160700

在使用Elasticsearch时，应该先手动创建索引，并确定此索引中的文档有哪些字段，及字段的数据类型！

请求格式：

### 自定义索引及其文档的属性和数据类型
PUT http://localhost:9200/{索引名}
Content-Type: application/json; charset=UTF-8

{
	"mappings": {
		"properties": {
			"{字段名1}": {
				"type": "{字段类型1}",
				"analyzer": "{分词器名称，仅用于text类型的字段}"
			},
			"{字段名2}": {
				"type": "{字段类型2}"
			},
			... ...
			"{字段名n}": {
				"type": "{字段类型n}"
			}
		}
	}
}

请求示例：

### 自定义索引及其文档的属性和数据类型
PUT http://localhost:9200/index_search
Content-Type: application/json; charset=UTF-8

{
  "mappings": {
    "properties": {
      "id": {
        "type": "long"
      },
      "title": {
        "type": "text",
        "analyzer": "ik_max_word"
      },
      "description": {
        "type": "keyword"
      },
      "sort": {
        "type": "long"
      },
      "price": {
        "type": "long"
      }
    }
  }
}

插入测试数据示例：

### 添加文档--测试数据1
PUT http://localhost:9200/index_search/_doc/1
Content-Type: application/json

{
  "id": 1,
  "title": "散装龙井",
  "description": "好喝又实惠",
  "sort": 160,
  "price": 300
}

### 添加文档--测试数据2
PUT http://localhost:9200/index_search/_doc/2
Content-Type: application/json

{
  "id": 2,
  "title": "大红袍大礼包",
  "description": "性价比之王",
  "sort": 190,
  "price": 688
}

### 添加文档--测试数据3
PUT http://localhost:9200/index_search/_doc/3
Content-Type: application/json

{
  "id": 3,
  "title": "龙井礼盒",
  "description": "送礼必备",
  "sort": 130,
  "price": 888
}

### 添加文档--测试数据4
PUT http://localhost:9200/index_search/_doc/4
Content-Type: application/json

{
  "id": 4,
  "title": "精装陈年老普洱",
  "description": "收藏珍品",
  "sort": 150,
  "price": 988
}

### 添加文档--测试数据5
PUT http://localhost:9200/index_search/_doc/5
Content-Type: application/json

{
  "id": 5,
  "title": "精装铁观音大礼包",
  "description": "家中常备",
  "sort": 160,
  "price": 700
}

搜索

简单的搜索

请求格式：

GET http://localhost:9200/{索引名}/_search?q={字段名:查询关键字}

请求示例：

### 根据关键字执行简单的搜索
GET http://localhost:9200/index_search/_search?q=title:龙井

高级搜索

### 高级搜索：自定义query，在query属性下配置match属性，在match属性下再配置搜索的字段名与关键字
GET http://localhost:9200/index_search/_search
Content-Type: application/json

{
  "query": {
    "match": {
      "title": "龙井"
    }
  }
}

### 高级搜索：多条件搜索：自定义query，在query属性下配置bool属性，在bool属性下再配置must，must的值是数组，数组元素就是匹配规则，must下的多个规则必须同时匹配才能被搜索到
### 除了must以外，还可以是should，should只需要匹配其中任意1个条件即可
### 另外，还可以是must_not，即不允许是某种规则
### must >>> AND
### should >>> OR
### must_not >>> !=
GET http://localhost:9200/index_search/_search
Content-Type: application/json

{
  "query": {
    "bool": {
      "should": [
        {
          "match": {
            "title": "龙井"
          }
        },
        {
          "match": {
            "description": "送礼必备"
          }
        }
      ]
    }
  }
}

### 高级搜索：查询指定字段的数据，在query同级配置_source，此属性的值是数组，用于指定字段列表
GET http://localhost:9200/index_search/_search
Content-Type: application/json

{
  "query": {
    "match_all": {}
  },
  "_source": [
    "id",
    "title",
    "price"
  ]
}

### 高级搜索：指定排序，在query同级配置sort属性，在sort属性中配置排序规则，默认根据字段值升序排列，也可以配置order属性来指定规则，取值为desc时为降序
GET http://localhost:9200/index_search/_search
Content-Type: application/json

{
  "query": {
    "match_all": {}
  },
  "sort": [
    {
      "sort": {},
      "id": {
        "order": "desc"
      }
    }
  ]
}

### 高级搜索：分页搜索，在query同级配置from和size属性
GET http://localhost:9200/index_search/_search
Content-Type: application/json

{
  "query": {
    "match_all": {}
  },
  "sort": [
    {
      "id": {}
    }
  ],
  "from": 1,
  "size": 3
}
yifan_1001
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
关于ElasticSearch版本7.8.0进行排坑
weixin_43706692的博客
07-21 3114
1.首先是安装之后的启动问题 大部分工作人员或者学生使用的jdk版本是 jdk1.8版本,可是es随着版本的更新所依赖的jdk版本也变高了 Elasticsearch 5 需要 Java 8 以上版本； Elasticsearch 6.5 开始支持 Java 11; Elasticsearch 7.0 开始，内置了 Java 环境，所以说，安装 7.0+ 版本会方便很多。 此时会遇到一个问题: 就是大部分人 都会再自己的环境变量中 设置 JAVA_HOME
【ElasticSearch】关于es跨域的问题
No8g攻城狮的博客
10-24 3482
本文目录一、使用es的head插件二、其他说明在使用es的head插件时，默认的9100，需要访问es的默认端口9200时，会出现跨域问题，此时只需要修改一下es的配置文件即可。在elasticsearch.yml中添加开启跨域的配置： 说明：如果在使用 elasticsearch-head 还是存在跨域的问题，则可以在elasticsearch.yml配置文件继续追加配置 完结！
关于ElasticSearch的_type类型
wangguohui0726的博客
09-08 2853
_type是es早期版本的设计缺陷。 在5.x以前的版本里边,一个index下面是支持多个type的， 在6.x的版本里改为一个index只支持一个type, type可以自定义。 7.x的版本所有的type默认为_doc（自定义type也能用，但是会提示不推荐） ...
关于Elasticsearch（es）中使用sql返回结果只有1000条
m0_65850671的博客
01-20 2618
Elasticsearch（es）中使用sql返回结果只有1000条，想要返回更多的数据可以这样做
关于elasticsearch 索引状态red问题排查
qq_39378795的博客
05-28 5710
在kibana上看到索引状态为red 通过查阅相关文档发现，red状态为改索引未分配到任一节点，yellow为分配到单一节点。 所以想着为这个索引分配节点，通过以下命令分配节点。 POST /_cluster/reroute { "commands":[ { "allocate_stale_primary":{ "index":"index_name". "shard":0, "node":"targetn_node", "accept_data_loss":
关于 Elasticsearch 429 Too Many Requests 的 排查思考
翟鳳璽的博客
05-11 1万+
导读 最近线上有个关键报错： Wrapped by: java.io.IOException: Request POST https://xxx/_search?search_type=xxx HTTP/1.1 yielded text/plain;charset=ISO-8859-1, should be json: HTTP/1.1 429 Too Many Requests 报错分析 如何看懂异常日志呢？ 先知道异常日志的输出规则。 异常名，细节信息，路径 的概念如下图。（参考：https:
关于 Elasticsearch 内存占用及分配
hunyxv的博客
03-18 1万+
Elasticsearch 和 Lucene 对内存使用情况： Elasticsearch 限制的内存大小是 JAVA 堆空间的大小，不包括Lucene 缓存倒排索引数据空间。 Lucene 中的 倒排索引 segments 存储在文件中，为提高访问速度，都会把它加载到内存中，从而提高 Lucene 性能。所以建议至少留系统一半内存给Lucene。 Node Query Cache (负责缓存...
关于elasticsearch用_update局部更新失败的问题
weixin_43756936的博客
04-02 4787
关于elasticsearch用_update局部更新失败的问题ElasticSearch部分更新测试新增测试数据修改name 错误信息 “error” : “no handler found for uri [/test/_doc/001/_update?pretty=true] and method [POST]” ElasticSearch部分更新 根据文档学习ElasticSearch的Rest风格对索引增删改，在更新部分，如果不设置某些值，会将不修改的值清空。因为文档是不可变的，不能更改，只
关于ElasticSearch8.x版本的账号密码
杨大仙
02-27 5923
废话不多说，直接上干货。 在项目中添加了链路追踪功能，想将链路追踪信息持久化。恰逢es8.0的问世，于是我也是抱着好奇心在官网下载玩了一下，同时下载了kibana8.0搭配使用。 下载安装很顺利，分别运行启动并访问kibana 双击或cmd运行（若双击闪退则在目录下使用cmd命令运行即可） kibana运行成功后通过cmd查看访问的网站。 （ps：cmd中有用的信息非常多，有时间可以仔细读读） 接下来会让你输入一段token和elastic8.0匹配，时长为30分钟。...
关于Elasticsearch的精确值查找（term）不生效问题
热门推荐
致虚极POLE守静笃
09-18 1万+
关于Elasticsearch的精确值查找（term）不生效问题的原因分析以及解决方案
es.rar 关于elasticsearch 的增删改查
05-26
关于 java 操作 的elasticsearch 7.x 的增删改查，下载即用，封装好的连接，查询哦，具体使用查看test 包下的方法即可
关于ES7210-TDM级联模式的简介-NxFs
06-16
音频硬件，TDM级联，NxFs，多麦克风链路设计
ElasticSearch官方测试数据
09-14
ElasticSearch官方测试数据
es docker 部署 elasticsearch.yml
03-19
docker run --name elasticsearch7.16.3 -p 127.0.0.1:9200:9200 -p 127.0.0.1:9300:9300 -e "discovery.type=single-node" -v /Users/xingyue/Home/xingyue/学习/工程化/es/elasticsearch.yml:/usr/share/elastic...
elasticsearch-8.2.3 windows 版本
06-21
elasticsearch-8.2.3 windows 版本。 Elasticsearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎，基于RESTful web接口。Elasticsearch是用Java语言开发的，并作为Apache许可条款下的...
jenkins自动化持续集成
qq_36751833的博客
05-14 1038
安装插件的时候，会有一些插件安装失败（如上图的X），这些插件的安装是有前置条件的，等安装结束后，按右下角“重试”，继续安装，之前失败的插件就都能安装了。（4）配置端口，填写一个端口，可以通过test port验证端口是否被其他程序占用，测试通过会打钩，如下图，默认是8080，如果有安装Tomcat，Tomcat的端口也是8080，就会冲突，我填的是8081。2、点击插件管理，点击插件安装，输入allure，会显示allure插件，直接点击安装即可，我是已经安装过了，所以这里搜索不到。
Jenkins的原理及应用详解（五）
凛鼕将至的博客
05-10 1304
Jenkins是一个开源的自动化构建工具，它能够帮助开发团队实现持续集成和持续交付。它具有良好的扩展性和灵活性，可集成多种版本控制系统和构建工具，适用于各种类型的项目。 本文将跟随《Jenkins的原理及应用详解（四）》的进度，继续介绍Jenkins。希望通过本系列文章的学习，您将能够更好地理解Jenkins的内部工作原理，掌握Jenkins的使用技巧，以及通过合理的设计完成最佳实践，充分发挥优化Jenkins的潜力，为系统的高效运行提供有力保障。
Linux中安装elasticsearch和kibana
SmileSunshines的博客
05-14 163
Linux中安装elasticsearch和kibana
xxljob分片广播+多线程实现高效定时同步elasticsearch索引库
最新发布
qq_30166465的博客
05-15 1041
xxljob分片广播：假如一共有1000条数据，有3个节点上运行着SearchApplication服务。那么每个节点需要同步的数据总条数为334,334,332条。分页查询：节点0的任务总条数为334条，那么需要做分页（假设分页size为20）查询的次数为17次，每查1次后，将查到的数据通过restHighLevelClient发送到es中。do {//5.1:分页查询//5.2:将数据导入ES//分页查询+导入es的操作//5.3:是否要查询下一页 index+size。
关于elasticsearch
04-22
Elasticsearch 是一个基于 Lucene 的分布式搜索引擎，可以用于全文搜索、结构化搜索和分析。它是一个开源的、可扩展的、实时的搜索分析引擎。它支持海量数据存储，可以快速、准确地检索存储在其中的大量数据，而且...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值