elasticsearch：7.7.1 使用详解(基于centos7笔记)

最新推荐文章于 2024-09-15 20:54:40 发布
最新推荐文章于 2024-09-15 20:54:40 发布
阅读量1.3k 收藏 2
点赞数
分类专栏： Linux 文章标签： elasticsearch linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_43230007/article/details/105005723
版权

elasticsearch：7.7.1 使用详解(基于centos7笔记)

目录:

elasticsearch(非Docker安装）
  1. 目录介绍
  2. 配置文件配置
  3. 启动
  4. ik分词器安装
elasticsearch(Docker安装)
  1. elasticsearch安装启动
  2. kibana安装配置
  3. 可视化界面补充
elasticsearch数据结构和基本原理
elasticsearch基本 API 命令
  1. 创建文档
  2. 创建索引
  3. 查看索引默认信息
  4. 查看索引详细信息
  1. 添加数据
  2. 修改、删除数据
  3. 查询数据
  4. 高亮显示

elasticsearch(非Docker安装）

下载解压

过程不再多说了，直接镜像网站下载 .gz 包然后解压

华为镜像

elasticsearch目录介绍

在这里插入图片描述

bin 启动文件
config 配置文件
log4j2 日志配置文件
jvm.options java虚拟机参数配置
elasticsearch.yml elasticsearch的配置文件，默认9200端口，可能会涉及到跨域问题
lib 相关jar包
logs 日志
modules 功能模块
plugins 比如ik分词器

配置elasticsearch配置文件

1. elasticsearch本身配置文件配置

config目录下:

  • jvm.options:配置堆内存，Xms=256m Xmx=256m(可以根据自己的电脑性能来进行配置)

  • elasticsearch.yml配置文件中配置你的ip，这样的话可以让外网进行访问

在这里插入图片描述

2. elasticsearch对系统的配置同样也是有着苛刻的要求

2.1 首先对系统最大文件数量有要求(65536)

编辑配置文件

vi /etc/security/limits.conf

添加配置

* soft nofile 65536
* hard nofile 65536

然后重启linux或者重新登录 su root 或者其他用户使得配置文件生效

2.2 接着，对最大的线程同样有着要求(262144)

编辑配置文件

vi /etc/sysctl.conf

进行参数配置

vm.max_map_count=262144

最后使得配置生效

sysctl -p

3. 跨域的配置

config目录下的elasticsearch.yml配置跨域设置

# 设置全部ip都可以进行跨域访问
http.cors.enabled: true
http.cors.allow-origin: "*"

在这里插入图片描述

启动elasticsearch

这个时候，elasticsearch启动不允许在root用户状态下面启动，需要在非root用户下启动，所以我们有需要有额外的配置了。

1. 我们先关闭防火墙，进行访问测试

systemctl stop firewalld
systemctl disable firewalld

2. 我们创建用户

groupadd es
useradd es -g es
chown -R es:es ./elasticsearch-7.7.1

3. 切换用户

su es

4. 进入bin目录进行启动

./elasticsearch

如果需要后台启动的话是下面这个命令

./elasticsearch -d

5. 访问效果如下

在这里插入图片描述

插件的安装(ik分词器)

1. 新建⽬录ik并且将分词器解压在这个目录下

cd /opt/elasticsearch/elasticsearch-7.7.1/plugins/elasticsearch-analysis-ik-7.7.1

mkdir ik

cd ik

2. 根据自己的版本选择对应的ik分词器，下面是官网的地址

wget https://github.com/medcl/elasticsearch-analysis-ik/releases/download/v7.7.1//elasticsearch-analysis-ik-7.7.1.zip

unzip elasticsearch-analysis-ik-7.7.1.zip

3. 启动后会有以下的效果

在这里插入图片描述

也可以通过下面的命令进行查看

elasticsearch-plugin list

[root@aa30c6c3d444 elasticsearch]# elasticsearch-plugin list
ik

4. 进入我们的kibana查看分词器的效果(如果没有安装图形界面请参照下面的教程)

GET _analyze
{
    "analyzer":"ik_smart",
    "text":"中国共产党"
}

在这里插入图片描述

最大拆分

GET _analyze
{
    "analyzer":"ik_max_word",
    "text":"中国共产党"
}

在这里插入图片描述

没有被拆分

GET _analyze
{
    "analyzer":"keyword",
    "text":"中国共产党"
}

在这里插入图片描述

标准拆分

GET _analyze
{
    "analyzer":"standard",
    "text":"中国共产党"
}

在这里插入图片描述

elasticsearch(Docker安装)

elasticsearch安装启动

话不多说，你只要安装了docker，下面一条命令就可以搞定了，配置一下内存(根据你的机器来配置)

如果没有安装，请参照网址

docker run -d --name elasticsearch02 -p 9200:9200 -p 9300:9300 \
-v elasticsearch7.0:/usr/local/elasticsearch \
-e "discovery.type=single-node" \
-e ES_JAVA_OPTS="-Xms64m -Xmx512m" elasticsearch:7.7.1

kibana安装启动

docker run \
-it \
--name kibana \
 -p 5601:5601 \
kibana:7.7.1 \
bin/bash

进入命令行配置kibana的配置文件

[root@iZ2ze1ycujbqzy1mnrzufbZ ~]# docker exec -it 3b239fff5b6e /bin/bash
bash-4.2$ ls  
kibana.yml
bash-4.2$ vi kibana.yml 
server.name: kibana
server.host: "0"
elasticsearch.hosts: [ "http://59.110.213.92:9200" ]
monitoring.ui.container.elasticsearch.enabled: true

然后我们直接通过：http://你的ip:5601 进行访问

可视化界面的安装的补充

1. 我们可以选择head插件

这里需要一些前端的安装环境

如果没有git，直接进行下载

yum install git

git clone git://github.com/mobz/elasticsearch-head.git
cd elasticsearch-head
npm install
npm run start
open http://localhost:9100/

连接测试，需要配置我们elasticsearch的跨域

2. ElisticHD，更加可视化的界面

这里我们演示docker安装

docker run \ 
-p \ 
9200:9200 \
-d \ 
--name elasticsearch01 \
elasticsearch

docker run \
-p 9800:9800 \
-d \
--link elasticsearch01 \
containerize/elastichd

在这里插入图片描述

elasticsearch数据结构和基本原理

数据结构

在这里插入图片描述

这里和MySQL有着非常相似的关系

database --> indices 索引
tables --> types 类型(这个可能描述的不太准确，type更加类似于java中的class)
rows --> documents 文档
columns --> field 字段

启动elasticsearch之后就是以集群的方式进行工作

elasticsearch把后台的每个索引划分为了多个分片，每个分片可以在集群中的不同服务器间迁移。所以我们一开始就是搭建了一个集群，虽然看上去是单机的安装。

在这里插入图片描述

一个集群至少有一个节点，一个节点就是一个elasticsearch进程，节点可以有多个索引，如果你创建了一个索引，那么索引将会有5个分片，每一个主分片都会有一个副本。

在这里插入图片描述

elasticsearch基本 API 命令

在这里插入图片描述

入门命令演示

1. 创建一个文档

PUT /索引名/类型名/文档id {请求体}

PUT /test/type1/1
{
    "name":"zhangsan",
    "age":3    
}

在这里插入图片描述

2. 创建一个索引

PUT /test2
{
    "mappings":{
        "properties":{
            "name":{
                "type":"text"
            },
            "age":{
                "type":"long"
            },
            "birthday":{
                "type":"date"
            }
        }
    }
}

在这里插入图片描述

GET test2

在这里插入图片描述

3. 查看默认信息

PUT /test3/_doc/1
{
    "name":"zhangsan",
    "age":21,
    "birth":"1997-01-05"
}

在这里插入图片描述

GET test3

在这里插入图片描述

4. 获取索引详细信息




GET _cat/indices?v

在这里插入图片描述

数据类型

字符串类型
text 、 keyword
数值类型
long, integer, short, byte, double, float, half_float, scaled_float
日期类型
date
PUT /索引名/类型名/文档id {请求体}
te布尔值类型
boolean
二进制类型
binary
等等…

命令进阶

增加数据

1. 添加数据

PUT /alibaba/user/1
{
    "name":"zhangsan",
    "age":21,
    "desc":"我是张三",
    "tags":["开发","专家"]
}

在这里插入图片描述

PUT /alibaba/user/2
{
    "name":"lisi",
    "age":22,
    "desc":"我是李四",
    "tags":["jvm","docker"]
}

在这里插入图片描述

2. 数据获取 GET

GET /alibaba/user/1

在这里插入图片描述

GET /alibaba/user

在这里插入图片描述

修改数据,删除数据

1. 更新数据 PUT

PUT /alibaba/user/1
{
    "name":"zhangsan:new",
    "age":21,
    "desc":"我是张三",
    "tags":["开发","专家"]
}

在这里插入图片描述

GET /alibaba/user/1

在这里插入图片描述

2. 更灵活的更新方式(推荐使用) POST _update

POST /alibaba/user/1/_update
{
    "doc":{
        "name":"ZHANGSAN:new"
    }
}

在这里插入图片描述

GET /alibaba/user/1

在这里插入图片描述

查询数据

1. 简单搜索

GET /alibaba/user/1

2. 条件查询

GET /alibaba/user/_search?q=name:lisi

在这里插入图片描述

3. 复杂条件查询

3.1 通过字段进行过滤

GET alibaba/user/_search
{
    "query":{
        "match":{
            "name":"lisi"
        }
    }
}

在这里插入图片描述

3.2 对字段结果进行过滤，返回部分字段

GET alibaba/user/_search
{
    "query":{
        "match":{
            "name":"lisi"
        }
    },
    "_source":["name","desc"]
}

在这里插入图片描述

3.3 对结果进行排序

GET alibaba/user/_search
{
    "sort":[
        {
            "age":{
                "order":"asc"
            }
        }   
    ]   
}

在这里插入图片描述

3.4 分页查询

GET alibaba/user/_search
{
    "from":0,
    "size":1 
}

在这里插入图片描述

3.3 布尔查询,逻辑判断查询(& | !)

bool 表示返回满足所有条件的结果

must 表示 and(&)
should 表示 or(|)
must_not 表示 not(!)

GET alibaba/user/_search
{
    "query":{
        "bool":{
            "must":[
                {
                    "match":{
                        "name":"lisi"
                            }       
                },
                {
                    "match":{
                        "age":"21"
                            }       
                }   
                ]
            }
    }
}

在这里插入图片描述

GET alibaba/user/_search
{
    "query":{
        "bool":{
            "must":[
                {
                    "match":{
                        "name":"lisi"
                            }       
                },
                {
                    "match":{
                        "age":"22"
                            }       
                }   
                ]
            }
    }
}

在这里插入图片描述

3.4 过滤器(< > =)

类似于比较运算符

gt 大于
gte 大于等于
lt 小于
lte 小于等于

GET alibaba/user/_search
{
    "query":{
        "bool":{
            "filter":{
                "range":{
                    "age":{
                        "gt":20,
                        "lt":22
                        }
                    }
                }
            }
    }
}

在这里插入图片描述

4. 精确查询

term查询时直接通过倒排索引指定的词条进程精确查找的

  • term，直接查询精确的

  • match，会使用分词器解析(先分析文档，然后在分析的结果中进行查询)

多个词精确匹配

GET /alibaba/user
{
    "query":{
        "bool":{
            "should":{
                "term":{
                    "age":"22"
                },
                "term":{
                    "age":"21"
                }
            }
        }
    }    
}

分词分析后在进行分析(就是经过了我们的ik分词器分词之后再对分词之后的结果进行查询)

GET alibaba/user/_search
{
    "query":{
        "match":{
            "desc":"李"
        }
    },
    "_source":["name","desc"]
}

在这里插入图片描述

5. 高亮查询

5.1 默认高亮显示

GET alibaba/user/_search
{
    "query":{
        "match":{
            "desc":"李"
        }
    },
    "highlight":{
        "fields":{
            "desc":{}
        }
    },
    "_source":["desc"]
}

在这里插入图片描述

5.2 自定义高亮显示

GET alibaba/user/_search
{
    "query":{
        "match":{
            "desc":"李"
        }
    },
    "highlight":{
        "pre_tags":"<p class='key' style='color:red'>",
        "post_tags":"</p>",
        "fields":{
            "desc":{}
        }
    },
    "_source":["desc"]
}

在这里插入图片描述

6. 关于MySQL和elasticsearch

其实elasticsearch的这些功能MySQL都可以实现，但是只不过效率会比较的低。

除了晚上都困-吧啦吧啦
关注
专栏目录
Elasticsearch系列之：Centos7安装部署Elasticsearch详细步骤
zhengzaifeidelushang的博客
11-28 1575
Elasticsearch系列之：Centos7安装部署Elasticsearch详细步骤
ELK系列(十一)、ElasticSearch7.7.0插件es-head安装及使用
王义凯 的博客
05-27 7212
前面讲完了ELK的应用，我们可以通过curl命令或者java或python的request命令，或者kibana的开发面板对ES的数据直接操作，本篇介绍一个轻量又好用的插件:es-head。 ELK系列(一)、安装ElasticSearch+Logstash+Kibana+Filebeat-v7.7.0 ELK系列(二)、在Kibana中使用RESTful操作ES库 ELK系列(三)、安装Logstash插件及打包离线安装包 ELK系列(四)、Logstash读取nginx日志写入ES中 ELK系
elasticsearch7.1.1安装和配置.pdf
11-14
ElasticSearch7.1.1安装与配置，在centos7.2下面的安装和配置方法，亲身实践的产物，和大家一起分享
ElasticSearch7.7.1集群搭建 & Kibana安装
李木
01-26 1744
Elasticsearch（ES）是一个基于Apache Lucene的分布式、高扩展、近实时的搜索引擎，主要用于海量数据快速存储、实时检索、高效分析的场景。通过简单易用的RESTful API，Elasticsearch隐藏了Lucene的复杂性，使得全文搜索变得简单。分布式：由于其分布式特性，Elasticsearch可以将海量数据分散到多台服务器上存储、检索和分析。高扩展性：Elasticsearch可以扩展到上百台服务器，支持大规模数据存储和检索。
elasticsearch7.7.1自学笔记
感谢关注点赞，笔芯啾咪！
01-21 296
1.新增文档 (不指定文档id，会随机生成一个id) 如果是7.x版本的es，不需要指定type，全部改成 _doc， _doc是默认的type类型 而且一个索引只有一个类型。 第一种。 post /index/type { "field1":"value1", "field2":"value2" } 第二种 put或者post /index/type/自定义文档id { "field1":"value1", "field2":"value2" } 2.修改文档 第一种，使
elasticsearch-7.1.1-windows-x86_64.zip
08-21
Elasticsearch 是一个实时的分布式搜索分析引擎， 它能让你以一个之前从未有过的速度和规模，去探索你的数据。 它被用作全文检索、结构化搜索、分析以及这三个功能的组合： （1）、Wikipedia 使用 Elasticsearch 提供带有高亮片段的全文搜索，还有 search-as-you-type 和 did-you-mean 的建议。 （2）、卫报 使用 Elasticsearch 将网络社交数据结合到访客日志中，实时的给它的编辑们提供公众对于新文章的反馈。 （3）、Stack Overflow 将地理位置查询融入全文检索中去，并且使用 more-like-this 接口去查找相关的问题与答案。 （4）、GitHub 使用 Elasticsearch 对1300亿行代码进行查询。 然而 Elasticsearch 不仅仅为巨头公司服务。它也帮助了很多初创公司，像 Datadog 和 Klout， 帮助他们将想法用原型实现，并转化为可扩展的解决方案。Elasticsearch 能运行在你的笔记本电脑上，或者扩展到上百台服务器上去处理PB级数据。
centos7安装单机elasticsearch7.7.1
vah101的专栏
08-27 819
并将程序解压缩到/opt/elasticsearch-7.7.1。之后，重启elasticsearch。按提示配置用户名密码即可。4. 修改虚拟内存数量。
CentOS 7部署ElasticSearch7.7.0
罐装冰水的博客
07-31 613
** CentOS 7部署ElasticSearch7.7.0 ** 1.安装解压 将下载好的安装包放入CentOS的/usr/local文件夹下并解压 解压：tar -zxvf elasticsearch-7.7.0-linux-x86_64.tar.gz 解压后如图： 2.尝试启动 需要注意elasticsearch在启动的时候是不允许使用root账户的，所以我们要新建一个用户（此处笔者新建用户名为es,之后会常用到该用户） useradd es 将elasticsearch-7.7.0目...
CentOS 7 安装 elasticsearch 7.5.1
qq_43626897的博客
01-18 432
本文档是单机版安装，本机上装的CentOS 7 ，安装的ElasticSearch是7.5.1
elasticsearch-7.7.1-windows-x86_64.rar
09-26
这个压缩包“elasticsearch-7.7.1-windows-x86_64.rar”或“elasticsearch-7.7.1-windows-x86_64.zip”包含了在Windows平台上运行Elasticsearch 7.7.1版本所需的所有组件。以下是关于Elasticsearch 7.7.1版本的详细...
最新版 elasticsearch-analysis-ik-7.7.1.zip
06-04
最新版 elasticsearch-analysis-ik-7.7.1.zip
rsyslog-elasticsearch-kibana:基于CentOS 7，rsyslog，elasticsearch和kibana的集中式日志记录的Docker映像
05-15
rsyslog-elasticsearch-kibana 基础上的集中记录图像与， 和 。 包含几个用于服务器的预配置仪表板- ， ， ， 和 。 截屏视频可在。 有关此工作以及如何配置FreeIPA服务器和客户端以将适当的日志发送到此容器的更...
详解centos7上elastic search安装及填坑记
09-15
在本文中，我们将深入探讨如何在CentOS 7系统上安装Elasticsearch，并解决可能出现的各种问题。Elasticsearch是一款流行的开源全文搜索引擎，广泛用于数据存储、搜索和分析。以下是安装和填坑的详细步骤： 首先，...
linux环境下Elasticsearch安装教程
qq_45036013的博客
03-10 3696
Linux云服务器下安装es详细步骤
ElasticSearch 7.7.1 集群+Kibana 7.7.1安装
z199172177的专栏
09-01 756
引言 最近接到一个项目，做的是政府的办公系统，前期规划中用到了ElasticSearch 做检索和数据统计。然后忙碌了一周写好了ElasticSearch 的API，开发阶段用的是阿里云的ES服务（PS：这里要感谢下阿里云让我白嫖了一个月的ES服务，省去了搭建服务的麻烦），版本是ElasticSearch 7.7.1 和Kibana 7.7.1。开发联调都很顺利，直到上线的前一周悲剧来了，项目经理告诉我，这次的项目要用政府平台的ElasticSearch 服务，不能自己搭建，而且他们平台最高的版本是6.4
(一) ElasticSearch Introduction(官网文档7.7版本学习）
BINGO的博客
06-04 590
目录： 一、 Data in: documents and indices 数据输入：文档和索引 二、 Information out: search and analyze 信息输出：搜索和分析 三、Scalability and resilience: clusters, nodes, and shards 可伸缩性和弹性：集群，结点和分片 1、介绍Elasticsearch \ logstash、beats\ kibana的关系 Elasticsearch是分布式搜索和分析引...
docker安装ELK详细步骤
热门推荐
yuemancanyang的专栏
02-02 2万+
系统配置：CentOS7.6 4核4G ELK版本：7.7.1 elastic官网地址：https://www.elastic.co/cn/ elastic产品地址：https://www.elastic.co/cn/elastic-stack yum源地址：https://mirrors.tuna.tsinghua.edu.cn/elasticstack/yum 前言 日志主要包括系统日志和应用程序日志，运维和开发人员可以通过日志了解服务器中软硬件的信息，检查应用程序或系统的故障，了解故障出现的原因，以
【Elasticsearch系列四】ELK Stack
最新发布
檀越的博客
09-15 1402
💝💝💝欢迎来到我的博客，很高兴能够在这里和您见面！希望您在这里可以感受到一份轻松愉快的氛围，不仅可以获得有趣的内容和知识，也可以畅所欲言、分享您的想法和见解。非常期待和您一起在这个小小的网络世界里共同探索、学习和成长。💝💝💝 ✨✨ 欢迎订阅本专栏 ✨✨。
docker安装filebeat:7.7.1
11-05
FROM docker.elastic.co/beats/filebeat:7.7.1 COPY filebeat.yml /usr/share/filebeat/filebeat.yml USER root RUN chown root:filebeat /usr/share/filebeat/filebeat.yml RUN chmod go-w /usr/share/filebeat/...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值