【Elasticsearch】Elasticsearch命令行操作

已于 2022-11-18 12:16:46 修改
阅读量2.6k 收藏 9
点赞数 2
分类专栏： ES 文章标签： elasticsearch java 大数据
于 2022-11-10 18:13:05 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_60969145/article/details/127792822
版权

文章目录

Elasticsearch

一、ES介绍

Redis可以使用内存加载数据并实现数据快速访问，MongoDB可以在内存中存储类似对象的数据并实现数据的快速访问，在企业级开发中对于速度的追求是永无止境的。ES也是一款NoSQL解决方案，只不过他的作用不是为了直接加速数据的读写，而是加速数据的查询的。

ES（Elasticsearch）是一个分布式全文搜索引擎，重点是全文搜索。

那什么是全文搜索呢？比如用户要买一本书，以Java为关键字进行搜索，不管是书名中还是书的介绍中，甚至是书的作者名字，只要包含java就作为查询结果返回给用户查看，上述过程就使用了全文搜索技术。搜索的条件不再是仅用于对某一个字段进行比对，而是在一条数据中使用搜索条件去比对更多的字段，只要能匹配上就列入查询结果，这就是全文搜索的目的。而ES技术就是一种可以实现上述效果的技术。

要实现全文搜索的效果，不可能使用数据库中like操作去进行比对，这种效率太低了。ES设计了一种全新的思想，来实现全文搜索。具体操作过程如下：

  1. 将被查询的字段的数据全部文本信息进行查分，分成若干个词

    • 例如“中华人民共和国”就会被拆分成三个词，分别是“中华”、“人民”、“共和国”，此过程有专业术语叫做分词。分词的策略不同，分出的效果不一样，不同的分词策略称为分词器。

  2. 将分词得到的结果存储起来，对应每条数据的id

    • 例如id为1的数据中名称这一项的值是“中华人民共和国”，那么分词结束后，就会出现“中华”对应id为1，“人民”对应id为1，“共和国”对应id为1

    • 例如id为2的数据中名称这一项的值是“人民代表大会“，那么分词结束后，就会出现“人民”对应id为2，“代表”对应id为2，“大会”对应id为2

    • 此时就会出现如下对应结果，按照上述形式可以对所有文档进行分词。需要注意分词的过程不是仅对一个字段进行，而是对每一个参与查询的字段都执行，最终结果汇总到一个表格中

分词结果关键字对应id
中华1
人民1,2
共和国1
代表2
大会2
  1. 当进行查询时，如果输入“人民”作为查询条件，可以通过上述表格数据进行比对，得到id值1,2，然后根据id值就可以得到查询的结果数据了。

上述过程中分词结果关键字内容每一个都不相同，作用有点类似于数据库中的索引，是用来加速数据查询的。但是数据库中的索引是对某一个字段进行添加索引，而这里的分词结果关键字不是一个完整的字段值，只是一个字段中的其中的一部分内容。并且索引使用时是根据索引内容查找整条数据，全文搜索中的分词结果关键字查询后得到的并不是整条的数据，而是数据的id，要想获得具体数据还要再次查询，因此这里为这种分词结果关键字起了一个全新的名称，叫做倒排索引。

使用ES其实准备工作还是挺多的，必须先建立文档的倒排索引，然后才能继续使用。

二、安装Elasticsearch

windows版安装包下载地址：https://www.elastic.co/cn/downloads/elasticsearch

将压缩包下载后，解压
在这里插入图片描述

  • bin目录：包含所有的可执行命令
  • config目录：包含ES服务器使用的配置文件
  • jdk目录：此目录中包含了一个完整的jdk工具包，版本17，当ES升级时，使用最新版本的jdk确保不会出现版本支持性不足的问题
  • lib目录：包含ES运行的依赖jar文件
  • logs目录：包含ES运行后产生的所有日志文件
  • modules目录：包含ES软件中所有的功能模块，也是一个一个的jar包。和jar目录不同，jar目录是ES运行期间依赖的jar包，modules是ES软件自己的功能jar包
  • plugins目录：包含ES软件安装的插件，默认为空

启动ES（双击即可）
在这里插入图片描述
浏览器访问
在这里插入图片描述

9200:表示公开对外的端口号

9300:表示集群成员之间的端口号

三、安装Kibana

1、kibana是es数据的前端展现，数据分析时，可以方便地看到数据。作为开发人员，可以方便访问es。

https://www.elastic.co/cn/downloads/

历史版本下载：https://www.elastic.co/cn/downloads/past-releases/

2、下载，解压kibana。

3、启动Kibana：bin\kibana.bat

在这里插入图片描述

浏览器访问 http://localhost:5601
在这里插入图片描述

默认端口为：5601

可能会出现的问题：
运行Kibana.bat，启动失败，报错大概意思是已经存在一个启动的Kibana了，但明明是第一次启动
报错：

[warning][savedobjects-service] Unable to connect to Elasticsearch. 
Error: [resource_already_exists_exception] index [.kibana_task_manager_1/_2s2vHazSRqCl7dPlZ_oQQ] already exists, with { index_uuid="_2s2vHazSRqCl7dPlZ_oQQ" & index=".kibana_task_manager_1" }

在cmd中运行如下命令:

curl -X DELETE http://localhost:9200/.kibana*

四、介绍ES中的一些概念

集群

集群这一概念已经遍及天下了，在Elasticsearch中也不例外，可以将多台Elasticsearch节点组成集群使用，可以在任意一台节点上进行搜索。

节点

节点是一台Elasticsearch服务器，可以存储、查询、创建索引，也可以与其它节点一共组成一个集群。

索引—数据库

索引是具有某种相似特性的文档集合，熟悉mysql的应该不会对于这个名词陌生，Elasticsearch使用的是倒排索引。

文档—数据库中表中一条记录

一个文档是一个可以被索引的基础信息单元。

分片

单个索引包含数据太大的话，将会降低索引速度。为此，Elasticsearch提供了将索引细分成多个片段的能力，就是分片。

副本

副本是ElasticSearch索引分片的备份，主要应对与节点故障时保存数据的可用性。副本与它的原始分片不会在同一个节点上，以此来保存单节点故障时的高可用。
在这里插入图片描述

注意: ES6.0以后Type这个概念模糊了，7.0以后不在使用Type. 默认索引的type都是_doc。

五、操作ES

ES中提供了大量的接口—这些接口要想访问必须按照restful风格来访问。

POST 添加操作 DELETE 删除操作 PUT 修改操作 GET 查询操作

可以在地址栏以地址的形式传递参数 /user/1

5.1索引

5.1.1 创建索引
PUT /索引名称
{
	"mappings":{
	     "properties":{
	           "字段名": {"type":"数据类型"}
               "字段名":{"type":"数据类型"}，
         }            
​    }
}

类型: text字符串类型 数字类型:int double

在这里插入图片描述

创建索引并指定分词器

前面创建的索引是未指定分词器的，可以在创建索引时添加请求参数，设置分词器。目前国内较为流行的分词器是IK分词器，使用前先在下对应的分词器，然后使用。

IK分词器下载地址：https://github.com/medcl/elasticsearch-analysis-ik/releases

分词器下载后解压到ES安装目录的plugins目录中即可，安装分词器后需要重新启动ES服务器。使用IK分词器创建索引格式：

PUT请求		http://localhost:9200/books

#请求参数如下（注意是json格式的参数）
{
    "mappings":{							#定义mappings属性，替换创建索引时对应的mappings属性		
        "properties":{						#定义索引中包含的属性设置
            "id":{							#设置索引中包含id属性
                "type":"keyword"			#当前属性可以被直接搜索
            },
            "name":{						#设置索引中包含name属性
                "type":"text",              #当前属性是文本信息，参与分词  
                "analyzer":"ik_max_word",   #使用IK分词器进行分词             
                "copy_to":"all"				#分词结果拷贝到all属性中
            },
            "type":{
                "type":"keyword"
            },
            "description":{
                "type":"text",	                
                "analyzer":"ik_max_word",                
                "copy_to":"all"
            },
            "all":{							#定义属性，用来描述多个字段的分词结果集合，当前属性可以参与查询
                "type":"text",	                
                "analyzer":"ik_max_word"
            }
        }
    }
}

创建完毕后返回结果和不使用分词器创建索引的结果是一样的，此时可以通过查看索引信息观察到添加的请求参数mappings已经进入到了索引属性中
在这里插入图片描述

5.1.2 查询所有索引
GET /_cat/indices

在这里插入图片描述

5.1.3 删除索引
DELETE /索引名称

在这里插入图片描述

5.1.4 查询索引结构
GET /索引名称

在这里插入图片描述

####################索引######################
# 创建索引
PUT /student
{
  "mappings": {
    "properties": {
      "name":{"type": "text"},
      "age":{"type": "integer"}
    }
  }
}

PUT /teacher
{
  "mappings": {
    "properties": {
      "name":{"type": "text"},
      "age":{"type": "integer"},
      "address":{"type": "text"}
    }
  }
}

# 查询所有索引
GET /_cat/indices

# 查询索引结构
GET /student

# 删除索引
DELETE /teacher

5.2 文档

5.2.1 添加文档

指定id添加 在这里插入图片描述
不指定id添加。—ES会生成一个唯一随机的字符串
在这里插入图片描述

5.2.2 删除文档
DELETE  /索引名称/_doc/id值

在这里插入图片描述

5.2.3 查询文档

在这里插入图片描述

5.2.1 修改文档

第一种: 需要指定所有被修改的字段名，如果没有指明的字段则会消失

# 修改文档（修改为下面的，没有列出的属性，会被删除）
PUT /teacher/_doc/1
{
  "name":"尚腾飞",
  "age":16
}

没有指明的字段则会消失在这里插入图片描述

第二种: 修改部分字段。没有指明的字段不会消失
在这里插入图片描述

####################文档######################
# 指定id，添加文档
POST /teacher/_doc/1
{
  "name":"刘德华",
  "age":18,
  "address":"香港"
}

# 不指定id添加。---ES会生成一个唯一随机的字符串
POST /teacher/_doc
{
  "name":"张学友",
  "age":18,
  "address":"香港"
}


# 删除文档
DELETE /teacher/_doc/0W2lW4QBTTQOPynSggAc

# 查询文档
GET /teacher/_doc/1

# 修改文档（修改为下面的，没有列出的属性，会被删除）
PUT /teacher/_doc/1
{
  "name":"尚腾飞",
  "age":16
}
# 修改文档（只修改给出的，没有列出的属性不会被删除）
POST /teacher/_doc/1/_update
{
  "doc":{
      "name":"尚"
  }
}
# 修改文档（官方推荐的写法，效果同上）
POST /teacher/_update/1
{
  "doc":{
      "name":"尚1"
  }
}

5.3 根据其他条件查询文档内容

5.3.1 查询索引中的所有文档内容

MySql : select * from 表名

ES: GET /索引名称/_search

在这里插入图片描述

查询所有文档信息，我们想要的结果封装到了hits中

5.4 根据其他条件查询

mysql: select name from 表名 where 其他字段=值

ES: GET /索引名称/_search?q=列名:值

在这里插入图片描述

5.5把查询的条件封装到json对象中—重点

在这里插入图片描述

注意: 排序按照数字，日期来排序。
mysql: 分页使用limit完成。 select * from 表名 limit (起始记录),每页的条数。

ES: “from”: 起始记录, “size”: 每页的条数

5.6 多条件查询

must等价于and
在这里插入图片描述

should 等价于 or
在这里插入图片描述

must_not 等价于 !
在这里插入图片描述
5.7 高亮查询
在这里插入图片描述

指定前缀后缀
在这里插入图片描述

上面我们把所有对应ES操作的API接口文档测试了一遍。下面使用springboot整合ES
【springboot整合ES】springboot整合ES
springboot整合es

打乒乓球只会抽
关注
  • 2
    点赞
  • 踩
  • 9
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
【Elasticsearch】Elasticsearch基本使用
M_Blog
11-06 388
elasticsearch会自动的将新字段加入映射，但是这个字段的不确定它是什么类型，elasticsearch就开始猜，如果这个值是18，那么elasticsearch会认为它是整形。索引存储了映射类型的字段和其他设置。分词：即把一段中文或者别的划分成一个个的关键字，我们在搜索时候会把自己的信息进行分词，会把数据库中或者索引库中的数据进行分词，然后进行一一个匹配操作，倒排索引作为底层,这种结构适合全文搜索，一个索引由文档中所有不重复的列表构成,对于每一个词，都有一个包含他的文档列表，例如,如下两个文档。
【Elasticsearch】Elasticsearch学习文档
iulmt的博客
03-07 2460
Elasticsearch 介绍 Elasticsearch 是一个开源的分布式全文本搜索和分析引擎。它支持RESTful操作，并允许您实时存储，搜索和分析大量数据。 官方文档 官方 Python 库 Elasticsearch ES Helper 下载 安装 Elasticsearch 官方下载链接 # 安装 dpkg -i elasticsearch-7.10.0-amd64.deb 启动 停止 重启 sudo systemctl enable elasticsearch.service sudo s
elasticsearch命令
weixin_42529756的博客
04-07 123
1.实现搜索结构 1.1准备索引文件 1.2提供搜索服务 2.lucene缺点不便之处 2.1lucene是java语言 对于其他想要使用lucene实现全文检索功能的语言.不友好 2.2lucene本身没有实现分布式 索引文件应该被切分成多分存储到不同服务器中,行程分布式,并且每一份数据都要保证高可用,还有分片主从复制. 3.elasticsearch引入搜索服务 3.1介绍 elasticsearch是一个底层封装了lucene实现的全文检索功能的搜索服务(web应用...
ElasticSearch的常用命令操作
qq_45722267的博客
07-13 4940
本文采用的ElasticSearch和kibana的版本为7.17.3。在ElasticSearch的操作中：搜索Dev Tools 进入到命令栏，即可对Elastic Search进行操作。 green 表示健康， yellow 表示亚健康， red 表示有问题。 三、ElasticSearch的增删查改操作 1、创建数据库 创建game库、consoleGame表、向id为1添加数据 PUT对应的修改内容为全局修改，是新的内容直接覆盖了旧的内容，如果要保持键的内容及数量不变，需要与旧的数据一
前端学习笔记ＥＳ６之命令行工具
最新发布
m0_59008364的博客
06-04 165
常用的命令行工具有两种：ＣＭＤ命令行工具。ＰｏｗｅｒＳｈｅｌｌ命令行工具。（功能要比CMD要方便很多，操作方便）但是前端用的命令行都是很基本的　所以这两种没啥太大差异。
ElasticSearch简单介绍及常见命令
DYSLzx的博客
11-26 625
简单介绍 Elasticsearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎，基于RESTful web接口。Elasticsearch是用Java开发的，并作为Apache许可条款下的开放源码发布，是当前流行的企业级搜索引擎。设计用于云计算中，能够达到实时搜索，稳定，可靠，快速，安装使用方便。 我们建立一个网站或应用程序，并要添加搜索功能，但是想要完成搜索工作的创建是非常困难的。我们希望搜索解决方案要运行速度快，我们希望能有一个零配置和一个完全免费的搜索模式，我们希
Elasticsearch终端命令行用法大全
天涯的浪子
08-31 1629
curl -H "Content-Type:application/json" -XPOST http://ip:port/索引名/_doc/01?pretty -d '{"id":"34234","name":"李四"}' --新增修改一条document文档信息,documentId为01curl -XGET http://ip:port/索引名/_doc/01?pretty --查询documentId为01的一条数据。
Elasticsearch常用命令
落幕7的博客
01-04 1138
ES 常用命令 RESTful API curl -X<VERB> '<PROTOCOL>://<HOST>:<PORT>/<PATH>?<QUERY_STRING>' -d '<BODY>' 参数 描述 VERB 适当的 HTTP 方法 或 谓词 : GET、 POST、 PUT、 HEAD 或者 DELETE。 PROTOCOL http 或者 https（如果你在 Elasticsearch 前面
Elasticsearch-API命令行相关操作手册
菜鸟运维升级之路
11-03 328
通过第一章学习es集群搭建流程及es基本概念后，在本章内容中，我们主要对es的基本命令行操作进行一次基本学习,来源于工作中的整理。以上就是实际运维中自身用到最多次的命令,后续也会进行补充更新,通过这些操作更好的熟悉es的用法。也欢迎各位大佬们评论区进行补充，一起学习进步！
es-dedupe:通过命令行对elasticsearch文档进行重复数据删除
06-15
为了解决这个问题，我们引入了"es-dedupe"工具，这是一个专门设计用于通过命令行界面在Elasticsearch中删除重复文档的应用程序。 "es-dedupe"项目是用JavaScript编写的，这意味着它可以在任何支持Node.js的环境中...
elasticsearch7.17.13版本分词器插件安装包
11-13
总的来说，安装Elasticsearch 7.17.13版本的IK分词器插件是一项关键操作，它将显著提升对中文文本的检索性能。理解并熟练掌握这个过程，对于利用ES进行日志收集、数据分析等任务至关重要。通过合理的配置和调优，...
python操作ElasticSearch.rar
01-04
`ES常用命令.txt`可能包含了一些Elasticsearch的命令行操作，如索引管理、集群状态检查、性能监控等。这些命令通常以curl命令的形式给出，也可以通过Elasticsearch的REST API接口在Python中实现。 通过深入学习并...
es2csv：从Elasticsearch导出到CSV文件
01-30
**es2csv：从Elasticsearch导出到CSV文件** `es2csv`是一个非常实用的工具，主要用于将数据从Elasticsearch索引导出到CSV格式的文件中。这个工具通常由Python编写，适用于那些需要对存储在Elasticsearch中的大量...
elasticSearch(ES)最新版 ik分词插件7.10 elasticsearch-analysis-ik-7.10.0
11-20
Elasticsearch（ES）是一种流行的开源全文搜索引擎，它基于Lucene构建，提供了分布式、RESTful风格的搜索和分析引擎服务。在中文环境下，为了实现精确的分词和搜索，我们需要安装适合版本的分词插件，如“elastic...
Elasticsearch命令（curl）大全
小强签名设计 的博客
10-13 5253
转载请标明原地址： 测试环境： Centos7.2 64位 jdk1.8.0_91 elasticsearch-2.2.0 CURL命令 – 简单认为是可以在命令行下访问url的一个工具 – curl是利用URL语法在命令行方式下工作的开源文件传输工具，使用curl可以简单实现常见的get/post请求。 – -x 指定http请求的方法（HEAD GET
Elasticsearch 常用命令 持续更新
勿忘初心
02-05 2913
_reindex curl --location --request POST 'http://10.138.25.214:9200/_reindex' \ --header 'Content-Type: application/json' \ --data-raw '{ "source": { "index": "deploy-log" }, "dest": { "index": "deploy-log-2018.12.24" } }' 创建index curl .
ELasticsearch基本操作命令
zouanning1986的博客
11-10 1094
es会自动建立index和type，不需要提前创建，而且es默认会对document每个field都建立倒排索引，让其可以被搜索。删除索引：DELETE /test_index?命令修改，必须带上全部field,否则会丢失field.创建索引：PUT /test_index?删除数据：DELETE /index/type/id。
Elasticsearch常用命令整理
haojiliang
01-24 4166
在命令行查看Elasticsearch信息及数据，另有es head插件（可以自己安装，另外在谷歌浏览器扩展程序里也有），可以直接在网页中可视化操作Elasticsearch https://blog.iaiot.com/Elasticsearch-cmd.html 1.查看Elasticsearch集群状态 curl http://10.1.1.113:9200/_cluster/h...
Elasticsearch（一）基本语法命令
fox_bert的博客
08-14 2213
重要】1、关于分词term：直接查询精确的解析（会用到分词器，分词器存在两种情况，text 和 keyword）match：会使用分词器解析！（先分析文档，然后再通过分析的文档进行查询）两个类型text：会被分词器分析keyword：不会被分词器分析。......
Elasticsearch命令行说明
05-25
下面是一些常用的Elasticsearch命令行说明： 1. 启动和停止Elasticsearch 启动Elasticsearch：./bin/elasticsearch 停止Elasticsearch：./bin/elasticsearch stop 2. 创建和删除索引 创建索引：PUT /index-name...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

打乒乓球只会抽

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值