一、Elasticsearch基础概念及ES8集群安装

已于 2023-09-10 20:12:45 修改
阅读量534 收藏 1
点赞数
分类专栏： Elasticsearch 文章标签： elasticsearch
于 2023-09-03 21:27:54 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/strap/article/details/132655550
版权

基础概念及es8集群安装

文档汇总

  1. 点击查看官方文档汇总
  2. 点击查看Elasticsearch Clients文档，如JAVA客户端文档
  3. 点击查看REST APIs文档
  4. 点击查看Elasticsearch配置项文档

基础概念

  1. 集群cluster
    一个集群就是由一个或多个节点组织在一起，它们共同持有整个的数据，并一起提供索引和搜索功能。一个集群由一个唯一的名字标识，这个名字默认就是"elasticsearch"。这个名字是重要的，因为一个节点只能通过指定某个集群的名字，来加入这个集群
  2. 节点node
    一个节点是集群中的一个服务器，作为集群的一部分，它存储数据，参与集群的索引和搜索功能。和集群类似，一个节点也是由一个名字来标识的，默认情况下，这个名字是一个随机的漫威漫画角色的名字，这个名字会在启动的时候赋予节点。这个名字对于管理工作来说挺重要的，因为在这个管理过程中，你会去确定网络中的哪些服务器对应于Elasticsearch集群中的哪些节点。
    一个节点可以通过配置集群名称的方式来加入一个指定的集群。默认情况下，每个节点都会被安排加入到一个叫做"elasticsearch"的集群中，这意味着，如果你在你的网络中启动了若干个节点，并假定它们能够相互发现彼此，它们将会自动地形成并加入到一个叫做"elasticsearch"的集群中。
    在一个集群里，只要你想，可以拥有任意多个节点。而且，如果当前你的网络中没有运行任何Elasticsearch节点。这时启动一个节点，会默认创建并加入一个叫做elasticsearch的集群。
  3. 结构
    请添加图片描述

下载及官方文档

官方github点击下载对应所需ES版本zip压缩包

📌任意不懂内容可以直接在ES官网搜索就能找到对应文档，比如
搜索cluster.initial_master_nodes，就可以找到此配置相关内容

安装es8

  1. 解压对应安装包elasticsearch-8.x.x-zip,先启动初始化一下es，
    执行bin目录下的elasticsearch.bat

    初始化完成后，保存初始化完获取的信息后面需要用到

    -> Elasticsearch security features have been automatically configured!
-> Authentication is enabled and cluster connections are encrypted.

->  Password for the elastic user (reset with `bin/elasticsearch-reset-password -u elastic`):
  3maAuxJjHdgoSTgaH9+S

->  HTTP CA certificate SHA-256 fingerprint:
  e7818ec3032eacef7dc911d97ca5998c5058987a44aecee3a6d128bed8e1315f

->  Configure Kibana to use this cluster:
* Run Kibana and click the configuration link in the terminal when Kibana starts.
* Copy the following enrollment token and paste it into Kibana in your browser (valid for the next 30 minutes):
  eyJ2ZXIiOiI4LjQuMSIsImFkciI6WyIxOTIuMTY4LjUwLjE0Njo5MjAwIl0sImZnciI6ImU3ODE4ZWMzMDMyZWFjZWY3ZGM5MTFkOTdjYTU5OThjNTA1ODk4N2E0NGFlY2VlM2E2ZDEyOGJlZDhlMTMxNWYiLCJrZXkiOiItWm43em9ZQjIxWndudC0weXpRQjpCbjZjblpfV1NreVR0bHlRckQyR0FBIn0=

->  Configure other nodes to join this cluster:
* On this node:
  - Create an enrollment token with `bin/elasticsearch-create-enrollment-token -s node`.
  - Uncomment the transport.host setting at the end of config/elasticsearch.yml.
  - Restart Elasticsearch.
* On other nodes:
  - Start Elasticsearch with `bin/elasticsearch --enrollment-token <token>`, using the enrollment token that you generated.
--------

  2. 暂不关闭服务，修改一下elastic的随机密码，方便后面测试

    bin/elasticsearch-reset-password -u elastic –i 修改为123456，修改后关闭服务

  3. 安装下载IK分词器拓展，需要注意版本和ES版本对应下载及官方文档

    将分词器zip安装包右键解压到es安装目录下的plugins目录即可，如xx/plugins/elasticsearch-analysis-ik-8.x.x

    可替代的中文分词包括HanLP分词

  4. 修改es的jvm内存配置，因为是在本机测试，到时会有多个服务启动，将内存配置改小，找到es安装目录下的config/jvm.options，添加或者修改以下配置项

    -Xms256m
-Xmx256m

  5. 修改es的配置文件，找到es安装目录下的/config/elasticsearch.yml，修改或新增以下内容

    xpack.security.enabled: true
xpack.security.enrollment.enabled: true

xpack.security.http.ssl:
  enabled: true
  keystore.path: certs/http.p12

xpack.security.transport.ssl:
  enabled: true
  verification_mode: certificate
  keystore.path: certs/transport.p12
  truststore.path: certs/transport.p12

http.host: 0.0.0.0
http.port: 9201
http.cors.enabled: true
http.cors.allow-origin: "*"
ingest.geoip.downloader.enabled: false
cluster.name: my-es
node.name: node-1
node.roles: [master,data]
cluster.initial_master_nodes: ["node-1","node-2","node-3"]
network.host: 127.0.0.1
transport.port: 9301
discovery.seed_hosts: ["127.0.0.1:9302","127.0.0.1:9303"]

    注意查看原文件是否已有重复配置项，配置重复项启动服务时会闪退

    xpack.security相关配置是开启es的https证书安全认证

    http.host配置允许访问的主机，0.0.0.0表示可以被任意远程主机访问

    http.port当前节点提供对外HTTP访问的端口

    http.cors相关配置开启跨域访问，配置es-head图形化界面

    ingest.geoip.downloader.enabled表示是否启用geoip数据库的相关更新，否则启动时更新会有geoip相关报错，设置false重新启动后会自动删除.geoip_databases索引

    cluster.name表示配置集群名称，一个节点只有在与集群中的所有其他节点有相同的cluster.name时才能加入集群

    node.name表示当前节点名称

    node.roles表示当前节点允许充当的角色，master即有机会选举为主节点，data可充当数据操作节点，如CRUD、搜索和聚合

    cluster.initial_master_nodes表示一个集群中符合主节点条件的节点初始集合

    discovery.seed_hosts表示集群中符合条件的主节点地址列表。每个地址的格式都是host:port或host。如果没有给出端口，则通过按顺序检查以下设置来确定

    1. transport.profiles.default.port
    2. transport.port
      如果这两项都未设置，则默认端口为9300
      network.host设置此节点HTTP和数据传输的地址。节点将绑定到此地址，并将其用作发布地址，可以是IP地址、主机名或特殊值1，默认为local

    transport.port节点间的数据传输使用端口

📌更多配置项可以在官方文档中查看点击查看Elasticsearch配置项文档

  1. 此时es的单个节点配置已完成，将安装文件夹修改为cluster-node1，将cluster-node1复制出来两份，分别重命名为cluster-node2、cluster-node3，同时分别清空cluster-node2、cluster-node3下的logs夹内容，删除整个data文件夹，cluster-node1不需要进行上述操作

  2. 复制cluster-node1的配置文件，YAML 代码块，同样注意不要重复配置

    1. cluster-node2的配置文件修改为以下内容
    xpack.security.enabled: true
xpack.security.enrollment.enabled: true

xpack.security.http.ssl:
  enabled: true
  keystore.path: certs/http.p12

xpack.security.transport.ssl:
  enabled: true
  verification_mode: certificate
  keystore.path: certs/transport.p12
  truststore.path: certs/transport.p12

http.host: 0.0.0.0
http.port: 9202
http.cors.enabled: true
http.cors.allow-origin: "*"
ingest.geoip.downloader.enabled: false
cluster.name: my-es
node.name: node-2
node.roles: [master,data]
cluster.initial_master_nodes: ["node-1","node-2","node-3"]
network.host: 127.0.0.1
transport.port: 9302
discovery.seed_hosts: ["127.0.0.1:9301","127.0.0.1:9303"]

    b. cluster-node3的配置文件修改为以下内容

    xpack.security.enabled: true
xpack.security.enrollment.enabled: true

xpack.security.http.ssl:
  enabled: true
  keystore.path: certs/http.p12

xpack.security.transport.ssl:
  enabled: true
  verification_mode: certificate
  keystore.path: certs/transport.p12
  truststore.path: certs/transport.p12

http.host: 0.0.0.0
http.port: 9203
http.cors.enabled: true
http.cors.allow-origin: "*"
ingest.geoip.downloader.enabled: false
cluster.name: my-es
node.name: node-3
node.roles: [master,data]
cluster.initial_master_nodes: ["node-1","node-2","node-3"]
network.host: 127.0.0.1
transport.port: 9303
discovery.seed_hosts: ["127.0.0.1:9301","127.0.0.1:9302"]

  3. 以此启动三个节点，cluster-node1、cluster-node2、cluster-node3

    bin/elasticsearch.bat，

    三个节点访问地址，任意一个浏览器访问，登录elastice/123456即可正常访问

    cluster-node1：https://127.0.0.1:9201

    cluster-node2：https://127.0.0.1:9202

    cluster-node3：https://127.0.0.1:9203

    到此es8集群安装结束

安装es-head图形化管理插件

  1. 下载es-head扩展包
  2. 安装到谷歌浏览器的扩展程序，步骤如下
    a. 将下载的压缩包解压，得到crx文件
    b. 将.crx修改为.zip，然后解压缩，将解压得到的多个文件（文件夹）移动至新文件夹；
    c. 在浏览器扩展页面选择“加载解压缩的扩展”，找到上面解压的目录文件夹，选中确认即可完成安装。
    文件夹不可删除，否则将导致插件不可用
  3. 浏览器点击es-head插件，打开管理页面，配置任意一个节点地址，输入密码，即可正常加载管理页面

在这里插入图片描述

如果点击"连接"没反应，先复制地址到浏览器访问一下，再回到当前页面继续连接

  1. 测试新建一个索引，如图

在这里插入图片描述

效果和前面结构分析一致，不同的分片分散在不同的节点
在这里插入图片描述

黑色加粗的为主分片，浅色黑边对应的是副本

  1. local
    系统上的任何环回地址，例如127.0.0.1
    site
    系统上的任何站点本地地址，例如192.168.0.1。
    global
    系统上任何全局范围的地址，例如8.8.8.8。
    [networkInterface]
    使用名为[networkInterface]的网络接口的地址。例如，如果您希望使用名为en0的接口的地址，则设置network.host:en0。
    0.0.0.0
    所有可用网络接口的地址。在一些系统中，这些特殊值解析为多个地址。如果是这样，Elasticsearch将选择其中一个作为其发布地址，并可能在每次节点重新启动时更改其选择。确保每个可能的地址都可以访问您的节点。注意：任何包含：的值（例如IPv6地址或某些特殊值）都必须引用""，因为：是YAML中的一个特殊字符。 ↩︎

strap
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Elasticsearch8版本安装详解，单节点部署、多节点部署、冷热温集群部署、IK分词器安装、简单生产安全模式配置(1)
2401_84264583的博客
05-02 574
官网文档：https://www.elastic.co/guide/en/kibana/8.1/introduction.html1、进入到解压目录2、编辑配置文件：vim kibana-8.1.0/config/kibana.yml我配置如下：3、启动kibanaroot用户启动：kibana-8.1.0/bin/kibana --allow-root启动成功的截图如下，会生成一个url，复制下来把0.0.0.0换成IP地址，在访问4、输入elasticsearch的kibana令牌登陆。
Elasticsearch8版本安装详解，单节点部署、多节点部署、冷热温集群部署、IK分词器安装、简单生产安全模式配置
timber wolf
05-30 1万+
Elasticsearch8版本安装详解，单节点部署、多节点部署、冷热温集群部署、IK分词器安装、简单生产安全模式配置，配置文件参数基础
真·实践出Elasticsearch8.0版本安装(指南)
bayitalk
07-12 3279
Elasticsearch从入门到大师系列（真指南）Elasticsearch8.0版本安装指南，quickstart，极速进入Elasticsearch学习。
ElasticSearch之ES8新特性及集群安装
scorpio的博客
09-18 9065
ElasticSearch之ES8新特性及集群安装
Windows 上 ElasticSearch 8 的安装以及配置
wkw4399xs的博客
02-01 4538
ES 8 在windows 上的安装以及可视化配置
SpringBoot集成Elasticsearch8.x（9）|（RestClient实现Elasticsearch DSL操作）
最新发布
Oaklkm的博客
12-06 604
Elasticsearch curl命令-XGET一种请求方法-d 标识以post形式传入参数 ，写在请求正文里面?pretty=true 以格式的形式显示结果pretty --查询elasticsearch的健康信息curl -XGET http://localhost:9200/ --查询实例的相关信息curl -XGET http://localhost:9200/_cluster/nodes/ --得到集群中节点的相关信息。
ElasticSearch 8.x 安装及集群搭建
zzhongcy的专栏
10-17 5407
Elasticsearch，简称为ES。ES是一个开源的高扩展的分布式全文检索引擎，它可以近乎实时的存储、检索数据。Elasticsearch是面向文档的一种数据库，这意味着其不再需要行列式的表格字段约束。ES会存储整个构造好的数据或文档，然而不仅仅是储存数据，这使得文档中每个数据可以被标识，进而可以被检索。在ES中，执行index，search，sort或过滤文档等操作都不是传统意义上的行列式的数据。ES从根本上对数据的不同思考方式也正是他能应对复杂数据结构的全文检索的原因之一。
k8s安装elasticsearch集群
m0_54852350的博客
05-14 848
1 环境简述 搭建es集群需要使用的技术如下：k8s集群、StatefulSet控制器、Service（NodePort）服务、PV、PVC、volumeClaimTemplates（存储卷申请模板）。 StatefulSet控制器创建的Pod适合用于分布式存储系统，它最大的特点是各个Pod的数据不一样，各个Pod无法使用同一个存储卷。注意StatefulSet会给所有的Pod从0开始编号，编号的规则是statuefulset名称−{statuefulset名称}-statuefulset名称−{序号}。如
Elasticsearch集群安装配置.docx
02-05
Elasticsearch集群安装配置 Elasticsearch 是一个基于 Apache Lucene 的搜索和数据分析引擎，支持实时搜索、数据分析和报表生成等功能。为了实现高可用性和高性能，Elasticsearch 集群安装配置是非常重要的。本文将...
Linux环境Elasticsearch集群部署及kibana安装笔记
01-09
Elasticsearch集群部署及kibana安装笔记Elasticsearch集群部署部署步骤1. 使用root账户创建用户2. 上次相关安装包3. 安装java（如已经安装，可不需要重复）4. 安装ES5. JVM 配置6. 修改系统配置7. 启动elasticsearch...
es(elasticsearch)集群安装优化
06-11
对于集群的监控和优化是很重要的一部分，如果想持久维护集群，单单靠增加物理内存，cpu，硬盘是不够的，必须通过一些方法来进行优化。本文档包含： 1、集群结点角色分配； 2、集群得机器内存设置； 3、ES集群的heap...
docker安装Elasticsearch7.6集群并设置密码
09-29
主要介绍了docker安装Elasticsearch7.6集群并设置密码，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
Kubernetes持久化部署elasticsearch7.15.0分布式集群
02-21
原文链接：https://blog.csdn.net/m0_37814112/article/details/122965720 说明：包含elasticsearch7.15.0集群3节点、5节点、7节点等三种方式的K8S部署yaml文件、镜像文件，里面有详细的README.txt部署参考
Elasticsearch 8.x实战 | elasticsearch 8.x 集群离线安装
xd15074483478的博客
03-23 2872
本文以elasticsearch8.6.2为例详述linux集群离线部署步骤，以为基础，针对部署过程中可能的疑问作说明。因为项目安全等的原因，很多时候我们要部署的目标机器是不能访问互联网的。本文是个人离线部署过程记录，希望也能帮助到有同样需要的同学。
linux 安装 elasticsearch8 单机安装
m0_64684588的博客
10-31 4739
elasticsearch8 单机安装、调试、添加到系统服务
【ElasticSearch8】SpringBoot集成ElasticSearch8.x 基本应用（环境安装和CRUD操作）
weixin_45131680的博客
10-13 2357
最近在研究es的时候发现官方已经在7.15.0放弃对旧版本中的Java REST Client （High Level Rest Client (HLRC)）的支持，从而替换为推荐使用的Java API Client 8.x。查看SpringBoot2.6.4的依赖，其中es的版本仅为7.15.2。</</</</因此这里我就按照官方文档使用了推荐的。</</</</鉴于es8.x的资料文档目前并不是很齐全，本文中如有错误，欢迎各位指出。本文将记录一些es8.x api下的简单CRUD操作。
ES8 向量搜索(knn-search)java-api 实践
VISION_SONG的博客
06-19 6016
es8 向量搜索, java-api 实践
【ElasticSearch8】springboot整合es8（一），实现简单查询
热门推荐
qq_24473507的博客
04-02 1万+
ES8官方api资料不全，es7以后就不支持template的连接方式，自己踩了不少坑，这里参考官方的api做了一个demo，供各位大佬参考，有哪里不对的欢迎各路大神批评指正
docker安装ES8集群
09-08
您好！要安装一个ES8集群，您可以使用Docker来部署，以下是一些简单的步骤： 1. 首先，确保您已经在系统上安装了Docker和Docker Compose。您可以通过运行以下命令来检查它们是否已安装： ``` docker --version docker-compose --version ``` 如果命令成功执行并显示版本信息，则说明Docker和Docker Compose已经安装好了。 2. 创建一个用于存储ES数据的目录，在您的系统上选择一个适当的位置，例如`/path/to/es-data`。执行以下命令创建该目录： ``` mkdir /path/to/es-data ``` 3. 创建一个名为`docker-compose.yml`的文件，并在其中定义ES服务的配置。以下是一个示例配置： ```yaml version: '3' services: es01: image: docker.elastic.co/elasticsearch/elasticsearch:8.0.0 container_name: es01 environment: - discovery.type=single-node volumes: - /path/to/es-data:/usr/share/elasticsearch/data ports: - 9200:9200 - 9300:9300 ``` 上述配置将创建一个名为`es01`的容器，使用Elasticsearch 8.0.0镜像，并将端口9200和9300映射到主机上。 4. 保存并关闭`docker-compose.yml`文件后，在终端中导航到包含该文件的目录，并执行以下命令启动ES集群： ``` docker-compose up -d ``` 上述命令将启动ES容器，并在后台运行。 5. 等待一段时间，直到容器启动并完成初始化。您可以使用以下命令检查容器状态： ``` docker ps ``` 如果看到`es01`容器正在运行，则说明ES集群已经成功安装和运行。 这样，您就已经成功地使用Docker安装了一个ES8集群。请注意，这只是一个简单的示例配置，您可能需要根据自己的需求进行调整和扩展。如果您需要部署更复杂的ES集群，建议阅读Elasticsearch官方文档以获取更多详细信息。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值