使用RestFul风格操作ElasticSearch 看这篇够了

最新推荐文章于 2024-04-21 17:55:17 发布
最新推荐文章于 2024-04-21 17:55:17 发布
阅读量533 收藏 3
点赞数
分类专栏： ElasticSearch
https://blog.csdn.net/UncleFujii
本文链接：https://blog.csdn.net/UncleFujii/article/details/112853302
版权

ElasticSearch教学篇

续上前言

所有有关于ElasticSearch的文档我想连在一起更新完在更新其他的内容，这篇主要是讲解如何使用restful风格去操作ElasticSearch，因为像我上篇所说直接写一篇SpringBoot集合ElasticSearch的可能内容会有点多，大家也是会看的有点吃亏，那么我就不定时给大家更新完，也让大家有一个消化期，从这篇开始我会将之前的博文路径都以表单的方式放入下面，大家可以直接跳转即可

名称路径
ES搜索（ElasticSearch）入门理论篇点击进入
ES搜索、Head、Kibana安装使用篇点击进入

下面我们续着上一章内容继续，在上面我们是把ES搜索、ElasticSearch Head、Kibana都安装好了，那么我们怎么去操作ES呢，之前只是说了一些安装一些工具，下面我来说一下具体的实现思路

ES核心

我在讲解实战之前再给大家唠嗑一下，然后等下还需要安装一样工具，我会把安装思路告知大家！
ElaticSearch是面向文档的 关系行数据库和ElaticSearch客观的对比
在这里插入图片描述
ElaticSearch（集群）可以包含多个索引（数据库），每个索引可以包含多个类（表），每个类下又包含多个文档（行），每个文档又包含多个字段（列）

物理设计

ElaticSearch在后台把每个索引划分成多个分片，每个分片可以在集群中不同服务器间迁移，一个人就是一个集群！默认的集群名称就是ElaticSearch

逻辑设计

一个索引类型中，又包含多个文档，比如说文档a、文档b。当我们索引一篇文档时，可以通过这样的一个顺序找到它：索引>类型>文档>ID，通过这个组合我们就能索引到某个具体的文档。注意：ID不必是整数，实际上它是个字符串

文档（重要）

ElaticSearch本身就是一个文档，那么久说明索引和搜索数据的最小单位就是文档，ElaticSearch中，文档有几个重要属性：

  • 自我包含，一篇文档同时包含字段和对应的值，也就是同时包含key：value
  • ​ 可以层次型的，一个文档中包含自文档，复杂的逻辑实体就是这么来的
  • ​ 灵活的层次结构.文档不依赖预先定义的模式，我们知道关系型数据库中，要提前定义字段才可以使用，在ElaticSearch中，对于字段是非常灵活的，有时候，我们可以忽略字段，或者动态的添加一个新字段
  • ​ 尽管我们可以随意的新增或者忽略某个字段，但是每个字段的类型都是非常重要，比如一个年龄字段类型，可以是字符串，也可以是整形，因为ElaticSearch会保存字段和类型之间的映射及其他的设置，这种映射到具体每个映射的每种类型，这也是在ElaticSearch中，类型有时候称为映射类型

类型

类型是文档逻辑容器，就像关系型数据库一样，表格是行的容器，类型中对于字段的定义称为映射，比如name映射，为字符串类型，我们说文档是无模式的，他不需要拥有映射中所定义的所有字段，比如说新增一个字段，那么ElaticSearch是怎么做的呢？ElaticSearch会自动的将新字段加入映射，但是这个字段的不确定它是什么类型，ElaticSearch就开始猜，如果这个值是18，那么ElaticSearch会认定这个值为整形，但是ElaticSearch也可能猜不对，所以最安全的方式就是提前定义好所需要的映射，这点跟关系型数据库速途同归了，先定义好字段，然后在使用

索引

藤井在这认为索引就是数据库
索引时映射类型的容器，ElaticSearch中的索引就是一个非常大的文档集合，索引存储了映射类型的字段和其他设置，然后在存储到各个分片上，下面来研究一下分片是如何进行工作的

物理设计

分节和分片如何工作
一个集群至少有一个节点，而一个节点就是一个ElaticSearch进程，节点可以有多个索引默认的，如果你创建索引，那么索引会将有5个分片（primary shard，又称主分片）构成的，每一个主分片会有一个副本（replica shard，又称复制分片）
在这里插入图片描述
上图是一个有3个节点的集群，可以看到主分片好对应的复制分片都不会在同一个节点内，这样有利于某个节点挂了之后呢，数据也不至于丢失，实际上，一个分片就是一个Lucene索引，一个包含倒排索引的文件目录，倒排索引的结构使得ElaticSearch在不扫描全部文档的情况下，就能告诉你哪些文档包含特定的关键字，下面让我们了解一下倒排索引吧

倒排索引

小提示：在现在的发展趋势中，面试官也是比较喜欢问什么是倒排索引哦！
ElaticSearch使用的是一种称为倒排索引的结构，采用Lucene倒排索引作为底层，这种结构适用于快速的全文搜索，一个索引由文档中所有不重复的列表构成，对于每一个词，都有一个包含它的文档列表

ElaticSearch中，索引（库）这个词被频繁使用，这就是术语的使用，在ElaticSearch中，索引被分为多个分片，每个分片是Lucene的索引，所以一个ElaticSearch索引就是由多个Lucene索引组成的。因为ElaticSearch使用Lucene作为底层，说起来还是指ElaticSearch的索引

IK分词器

什么是IK分词器

分词：就是把一段中文或者别的划分为一个个关键字，我们在搜索的时候会把自己的信息进行分词，会把数据库中或者索引库中的数据进行分词，然后进行一个匹配操作，默认的中文分词是将每个字看做一个词，比如“藤井大叔”分成“藤”，“井”，“大”，“叔”，这明显是不符合要求的，所以就要安装中文分词器IK来解决这个问题

IK提供了两种分词算法：ik_smart和ik_max_word，其中ik_smart为最少切分，ik_max_word为最细粒度划分

安装

注意：7.10.1自带IK分词器，以上版本未知，如没有可根据以下版本去安装下载
安装地址:https://github.com/medcl/elasticsearch-analysis-ik
在这里插入图片描述
当我们的版本如果有IK分词器那么你运行cmd会有显示的，可进行查看
在这里插入图片描述
命令行查看IK

步骤：打开ES搜索文件夹运行cmd输入命令：elasticsearch-plugin list
在这里插入图片描述
好了，这下我们工具齐全，那么就可以开始工作了，在屡一下我们的安装工具,下面我在巩固一下我们所安装的工具，具体安装如下：

  • ElasticSearch：直接官网下载，下载可能会有点慢，网速不好下载一天，可用迅雷或其他方式下载，下载即用
  • ElasticSearch Head：可在GitHub下载即可，不需要很久，下载即用
  • Kibana：直接在官网下载，可能会有点慢，也可用迅雷，下载即用
  • IK：7.10.1版本自带，其他版本未知如需下载可在GitHub上下载
    注：所有下载方式在上方讲解都有，专心看完

Kibana测试

这里我们就拿我们的祖国名称来做测试“中华人民共和国”

上面我有提到有两种方式首先我们拿第一种测试，也就是: ik_smart
在这里插入图片描述
第二种测试方法：ik_max_word
在这里插入图片描述
测试成功，观察问题，下面拿我网名测试
在这里插入图片描述
这种我们自己需要的值，是需要自己去加入到分词器的字典中，下面看如何进行！
在这里插入图片描述
好的下面直接开始试验

上面这个子目录下直接新建了一个藤井大叔的英文名uncletj.dic的文件夹，然后呢在把文件夹名称放入这个子目录下的.xml文件里面，具体操作看如下图
在这里插入图片描述
在完成上面操作之后呢，记得重启ES！

注：一定要把.dic文件编码格式设置成utf-8
下面我们来看一下生效了吗？
在这里插入图片描述
找到了，证明是成功了，好了，有关于这边的测试就到此结束，下面我们直接实战一下试试？

ResuFul风格

一种软件架构风格，而不是标准，只是提供了一组设计原则和约束条件，它主要用于客户端和服务器交互类的软件。基于这个风格，设计的软件可以更加简洁，更有层次，更容易实现缓存等机制
基于Rest命令说明

methodurl地址描述
PUTlocalhost：9200/索引名称/类型名称/文档id创建文档（指定文档id）
POSTlocalhost：9200/索引名称/类型名称创建文档（随机文档id）
POSTlocalhost：9200/索引名称/类型名称/文档id/_update修改文档
DELETElocalhost：9200/索引名称/类型名称/文档id删除文档
GETlocalhost：9200/索引名称/类型名称/文档id查询文档通过文档id
POSTlocalhost：9200/索引名称/类型名称/search查询所有数据

测试

创建一个索引

格式：put /索引名/类型名/
在这里插入图片描述
完成了自动增加索引，数据也成功的添加了，这也是我上面说的把它当做数据库的原因
在这里插入图片描述

字段常用类型介绍

字符串类型

text、keyword

​数值类型

long、integer、short、byte、double、float、half float、scaled float

​日期类型

​date

​布尔值类型

​boolean

​二进制类型

​binary

指定字段类型

创建规则
在这里插入图片描述
通过GET请求获取索引信息
在这里插入图片描述
查看默认信息
在这里插入图片描述
如果你的文档字段没有指定，那么它会默认给你配置字段类型
在这里插入图片描述
查看信息命令（GET _cat/…）

GET _cat/health：查看健康值

GET _cat/indices：查看所有索引信息

修改

（1）直接在原来的上面进行修改
在这里插入图片描述
（2）使用POST方式修改
在这里插入图片描述

删除索引

删除索引全部内容
在这里插入图片描述
通过DELETE就可以实现删除了，根据你的删除请求来判断是删除索引还是来删除索引文档记录！

使用RestFul风格是ES推荐使用的！
好了基本操作就是上面这样的，然后我们再来回顾一下，下面来总结一下

基本操作回顾

添加

1.添加一条数据 PUT

PUT /uncletj/user/1
{
  "name":"藤井大叔",
  "age":23,
  "desc":"自信即巅峰",
  "tags":["技术宅","温暖","直男"]
}

在这里插入图片描述

查询

2.获取数据 GET
在这里插入图片描述

更新

3.更新数据 PUT
在这里插入图片描述
3.1:POST _update,推荐使用这种更新方式！下面这种灵活性更高
在这里插入图片描述

搜索方式

简单搜索

GET uncletj/user/1

简单查询

GET uncletj/user/_search?q=name:藤井

结构式讲解：

GET:查询方式

uncletj/user:所查询的库

_search:查询所有

？q=name:藤井：查询条件

简单的条件查询，可以根据默认的映射规则，产生基本的查询
复杂搜索select(排序、分页、高亮、模糊查询、精准查询)
在这里插入图片描述
在这里插入图片描述
输出结果，相当于数据库的select 字段名1、字段名2… from 表名
在这里插入图片描述
我们之后使用Java操作es，所有的方法和对象就是这里面的key
排序
在这里插入图片描述
当然也可以使用下面代码会更规范

GET uncletj/user/_search
{
  "query": {
    "match": {
      "name":"可乐"
    }
  },
  "sort":{
    "age":{
      "order":"asc"
    }
  }
}

分页（from：起始页；size：每页的数值数）
在这里插入图片描述
布尔值查询
must（and），所有的条件都要符合，同等于数据库的where …and…
在这里插入图片描述
其他用法

（1）把must改成should那么就等价与or

（2）把must改成must_not那么就是不等于这个的数据显示，相当于not
过滤
在这里插入图片描述
gt:大于

gte：大于等于

lt：小于

lte：小于等于
多个条件进行查询
在这里插入图片描述
直接在里面加就好了，上面的意思是大于等于1岁并且小于15岁
匹配多个条件
在这里插入图片描述
精确查询
term查询是直接通过倒排索引指定的词条进程精确的查询

关于分词：

term：直接查询精确的

match：会使用分词器解析！（先分析文档，然后在通过分析的文档进行查询）
两个类型text keyword
在这里插入图片描述
好了，这篇就到此结束了，内容可能会稍微有些多，我在后期会直接续住这篇来进行下篇的开展，当然这时会有人有缴械心理，我等藤井先把所有的先更新完在一起看完，在这里告诉大家一口吃不了大胖子，如真的想学好那就温故而知新是最好的选择，咱们下期见！
在这里插入图片描述

藤井大叔
关注
  • 0
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
掌控数据的力量：如何使用 Elasticsearch 的 RESTful API
07-18
Elasticsearch 是一个基于 Lucene 构建的开源、分布式、RESTful 风格的搜索和分析引擎。它通常用于处理大量数据的搜索、分析和存储任务。以下是 Elasticsearch 的一些关键特点： 1. **分布式**：Elasticsearch 可以...
深入探索：Elasticsearch 的 RESTful API 揭秘
07-18
Elasticsearch 是一个基于 Lucene 构建的开源、分布式、RESTful 风格的搜索和分析引擎。它通常用于处理大量数据的搜索、分析和存储任务。以下是 Elasticsearch 的一些关键特点： 1. **分布式**：Elasticsearch 可以...
Elasticsearch基本操作-RESTful操作
我这孩子从小记性就不好，什么东西都要写下来才放心
08-03 879
Elasticsearch 是一个分布式、RESTful 风格的搜索和数据分析引擎，是面向文档型数据库，一条数据在这里就是一个文档。
Elasticsearch 7.X RESTful 风格 高级查询
小毕超博客
12-29 4489
一、Elasticsearch 上篇文章中我们简单介绍了ES，并介绍了索引、文档、映射的操作，今天我们学习下复杂的高级查询。 上篇文章地址：https://blog.csdn.net/qq_43692950/article/details/122222522 本篇还是使用PostMan进行测试。还是基于上篇文章中创建的user索引。 二、RESTful 风格 高级查询 1. 查询所有文档 向 ES 服务器发 GET 请求 ： http://127.0.0.1:9200/user/_search 2
java通过restful风格访问elasticsearch
天缸的博客
09-13 601
restful风格访问elasticsearch
Elasticsearch 7.X RESTful 风格 索引、文档、映射操作
小毕超博客
12-29 4947
一、Elasticsearch Elasticsearch (ES)是一个基于Lucene构建的开源、分布式、RESTful 接口全文搜索引擎。Elasticsearch 还是一个分布式文档数据库，其中每个字段均是被索引的数据且可被搜索，它能够扩展至数以百计的服务器存储以及处理PB级的数据。它可以在很短的时间内在储、搜索和分析大量的数据。它通常作为具有复杂搜索场景情况下的核心发动机。 Elasticsearch就是为高可用和可扩展而生的。可以通过购置性能更强的服务器来完成。 在本专栏的前几篇文章中我们介绍过
15、全文检索 -- Elasticsearch -- 使用 RESTful 客户端操作 Elasticsearch 介绍，代码演示：让项目通过 HTTPS 连接 Elasticsearch 的配置
Java 领域技术分享
02-24 1104
全文检索 -- Elasticsearch -- 使用 RESTful 客户端操作 Elasticsearch 介绍，代码演示：让项目通过 HTTPS 连接 Elasticsearch 的配置
Restful风格操作elasticsearch
qq_33693776的博客
12-25 209
是什么？ elasticsearch是一个分布式搜索引擎，由Java开发，具体的描述可以自行百度 与关系型数据库比较 Elasticsearch 关系型数据库Mysql 索引(index) 数据库(databases) 类型(type) 表(table) 文档(document) 行(row) 下载安装 下载ElasticSearch 5.6.8版本 https://w...
ElasticSearch全文搜索引擎之Restful API和索引操作篇
weixiaohuai的博客
09-29 664
一、Rest风格说明 一种软件架构风格 ，而不是标准，只是提供了一组设计原则和约束条件。它主要用于客户端和服务器交互类的软件，基于这个风格设计的软件可以更简洁，更有层次，更易于实现缓存等机制。 基本Rest命令说明： method url地址 描述 PUT localhost:9200/索引名称/类型名称/文档id 创建文档（指定文档id） POST localhost:9200/索引名称/类型名称 创建文档（随机文档id） POST localh
【ElasticSearch从入门到放弃系列 零】ElasticSearch看这一篇就够了
MaoLin Tian's Blog
01-17 9085
大数据时代系统和业务每分每秒都产生成千上万的数据，其存储一定是不能通过关系型数据库了，当然因为数据的持久性也不能存储到内存型Nosql数据库Redis中，我们通常会将这些数据存储在能够不丢失数据的非关系型数据库中，这个技术选型有很多，例如HBase、Cassandra，这里我们暂不关心其数据存储，留待日后讨论，我们关注的是另一件事，如何能在分布式的数据库中进行PB级的数据检索，目前市场上较为成熟的解决方案中间件就是ElasticSearch，本文将对ElasticSearch进行全面讨论： 全文检索的应用
Elasticsearch 的 RESTful API解析
专注于数据库技术分享，包含但不限于Oracle，MySQL，PostgreSQL，ElasticSearch及国产数据库等
04-21 767
Elasticsearch 使用 RESTful API 作为其主要的交互方式，允许用户通过标准的 HTTP 请求与 Elasticsearch 集群进行通信，进行索引管理、文档操作、搜索查询、集群监控等各种任务。
ElasticSearch分布式搜索引擎是一个分布式的RESTful风格的搜索和数据分析引擎，能够解决越来越多的用例.rar
06-30
ElasticSearch分布式搜索引擎是一个分布式的RESTful风格的搜索和数据分析引擎，能够解决越来越多的用例。作为Elastic Stack的核心，它集中存储您的数据，帮助您发现意料之中以及意料之外的情况。 Elasticsearch是一...
ElasticSearch使用说明书 - 整合篇
04-14
Elasticsearch（ES）是一种分布式、RESTful风格的搜索和数据分析引擎，常用于大数据分析和实时搜索场景。它不依赖传统的SQL数据库语句，而是采用JSON文档格式和HTTP协议进行交互。本文将涵盖ES的安装、配置、Kibana...
elasticsearch介绍与使用.pdf
08-14
Elasticsearch 是基于Lucene构建的，它提供了一个分布式、RESTful风格的搜索和数据分析引擎，适合大规模数据的实时搜索和分析。Elasticsearch 的特点包括： - 分布式：能够自动在多个节点间分布数据和索引，提供高...
yolo-fastest.zip
07-28
yolo-fastest
mysql安装配置教程.pdf
最新发布
07-28
MySQL的安装配置教程可以细分为以下几个步骤，这里以Windows系统为例进行说明： 一、下载MySQL 1.访问MySQL官网： 1.前往MySQL的官方网站（https://www.mysql.com/）下载MySQL Community Server。 2.选择下载版本： 1.在官网的Downloads页面，选择“MySQL Community (GPL) Downloads”下的“MySQL Installer for Windows”。 2.跳过注册步骤，直接下载MySQL安装包。 二、安装MySQL 1.运行安装包： 1.找到下载好的MySQL安装包文件，双击运行。 2.选择安装类型： 1.在安装向导中，选择安装类型（通常建议选择“Custom”进行自定义安装）。 2.选择操作系统的位数（如64位），并勾选“Enable the Select Features...”等选项（如果提示缺少运行库，需要先安装相应的VC_redist）。 3.设置安装路径： 1.选择MySQL的安装路径和数据存储路径，建议将MySQL安装在非系统盘（如D盘）以避免潜在的问题。 4.设置密码：
基于transformers+pytorch实现非结构化商业文本信息中隐私信息识别python源码（比赛获奖项目）.zip
07-28
基于transformers+pytorch实现非结构化商业文本信息中隐私信息识别python源码（比赛获奖项目）.zip CCF大数据与计算智能大赛-非结构化商业文本信息中隐私信息识别方案 bert base + flat + crf + fgm + swa + pu learning策略 + clue数据集 = test1单模0.906 词向量：https://github.com/Embedding/Chinese-Word-Vectors SGNS(Mixed-large 综合) loss mask相关代码为pu learning策略的实现 主要模块版本 python 3.6.9 torch 1.1.0 transformers 3.0.2 pytorchcrf 1.2.0 torchcontrib 0.0.2 主要功能点 使用BERT base作为基础模型 采用flat结构进行命名实体识别 使用CRF层进行序列标注 采用对抗训练(FGM)和平滑权重平均(SWA)策略提高模型泛化能力 使用PU learning策略处理标注不全的数据 利用clue数据集进行训练
（verilog）基于MIPS指令集的单周期CPU设计
07-28
相关代码及Vivado项目工程文件
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

藤井大叔

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值