ElasticSearch学习笔记-集群安装部署

最新推荐文章于 2023-05-30 00:17:42 发布
最新推荐文章于 2023-05-30 00:17:42 发布
阅读量766 收藏
点赞数
分类专栏： ElasticSearch 文章标签： ElasticSearch
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/fighting_one_piece/article/details/52099000
版权

集群版本：elasticsearch-2.4.6.tar.gz

集群节点：

centos.master  192.168.10.10

centos.slave1   192.168.10.11

centos.slave2   192.168.10.12

配置文件 elasticsearch.yml：

cluster.name: elasticsearch
node.name: master
node.master: true
node.data: true
path.data: /home/hadoop/software/elasticsearch-2.4.6/data
path.logs: /home/hadoop/software/elasticsearch-2.4.6/logs
bootstrap.mlockall: true
network.host: 192.168.10.10
http.port: 9200
transport.tcp.port: 9300
transport.tcp.compress: true
discovery.zen.ping.unicast.hosts: ["192.168.10.10", "192.168.10.11", "192.168.10.12"]
discovery.zen.minimum_master_nodes: 1
index.refresh_interval: -1
indices.memory.index_buffer_size:  20%
indices.reovery.max_bytes_per_sec: 10gb
index.merge.policy.max_merged_segment: 10gb
index.merge.scheduler.max_thread_count: 3
index.merge.scheduler.max_merge_count: 6
index.translog.flush_threshold_ops: 50000
index.translog.flush_threshold_size: 5gb
index.search.slowlog.level: TRACE
index.search.slowlog.threshold.query.warn: 10s
index.search.slowlog.threshold.query.info: 5s
index.search.slowlog.threshold.query.debug: 2s
index.search.slowlog.threshold.query.trace: 500ms
index.search.slowlog.threshold.fetch.warn: 1s
index.search.slowlog.threshold.fetch.info: 800ms
index.search.slowlog.threshold.fetch.debug: 500ms
index.search.slowlog.threshold.fetch.trace: 200ms
index.indexing.slowlog.threshold.index.warn: 10s
index.indexing.slowlog.threshold.index.info: 5s
index.indexing.slowlog.threshold.index.debug: 2s
index.indexing.slowlog.threshold.index.trace: 500m
security.manager.enabled: false

 

cluster.name: elasticsearch
node.name: slave1
node.master: false
node.data: true
path.data: /home/hadoop/software/elasticsearch-2.4.6/data
path.logs: /home/hadoop/software/elasticsearch-2.4.6/logs
bootstrap.mlockall: true
network.host: 192.168.10.11
http.port: 9200
transport.tcp.port: 9300
transport.tcp.compress: true
discovery.zen.ping.unicast.hosts: ["192.168.10.10", "192.168.10.11", "192.168.10.12"]
discovery.zen.minimum_master_nodes: 1
index.refresh_interval: -1
indices.memory.index_buffer_size:  20%
indices.reovery.max_bytes_per_sec: 10gb
index.merge.policy.max_merged_segment: 10gb
index.merge.scheduler.max_thread_count: 3
index.merge.scheduler.max_merge_count: 6
index.translog.flush_threshold_ops: 50000
index.translog.flush_threshold_size: 5gb
index.search.slowlog.level: TRACE
index.search.slowlog.threshold.query.warn: 10s
index.search.slowlog.threshold.query.info: 5s
index.search.slowlog.threshold.query.debug: 2s
index.search.slowlog.threshold.query.trace: 500ms
index.search.slowlog.threshold.fetch.warn: 1s
index.search.slowlog.threshold.fetch.info: 800ms
index.search.slowlog.threshold.fetch.debug: 500ms
index.search.slowlog.threshold.fetch.trace: 200ms
index.indexing.slowlog.threshold.index.warn: 10s
index.indexing.slowlog.threshold.index.info: 5s
index.indexing.slowlog.threshold.index.debug: 2s
index.indexing.slowlog.threshold.index.trace: 500m
security.manager.enabled: false

 

cluster.name: elasticsearch
node.name: slave2
node.master: false
node.data: true
path.data: /home/hadoop/software/elasticsearch-2.4.6/data
path.logs: /home/hadoop/software/elasticsearch-2.4.6/logs
bootstrap.mlockall: true
network.host: 192.168.10.12
http.port: 9200
transport.tcp.port: 9300
transport.tcp.compress: true
discovery.zen.ping.unicast.hosts: ["192.168.10.10", "192.168.10.11", "192.168.10.12"]
discovery.zen.minimum_master_nodes: 1
index.refresh_interval: -1
indices.memory.index_buffer_size:  20%
indices.reovery.max_bytes_per_sec: 10gb
index.merge.policy.max_merged_segment: 10gb
index.merge.scheduler.max_thread_count: 3
index.merge.scheduler.max_merge_count: 6
index.translog.flush_threshold_ops: 50000
index.translog.flush_threshold_size: 5gb
index.search.slowlog.level: TRACE
index.search.slowlog.threshold.query.warn: 10s
index.search.slowlog.threshold.query.info: 5s
index.search.slowlog.threshold.query.debug: 2s
index.search.slowlog.threshold.query.trace: 500ms
index.search.slowlog.threshold.fetch.warn: 1s
index.search.slowlog.threshold.fetch.info: 800ms
index.search.slowlog.threshold.fetch.debug: 500ms
index.search.slowlog.threshold.fetch.trace: 200ms
index.indexing.slowlog.threshold.index.warn: 10s
index.indexing.slowlog.threshold.index.info: 5s
index.indexing.slowlog.threshold.index.debug: 2s
index.indexing.slowlog.threshold.index.trace: 500m
security.manager.enabled: false

安装插件

[hadoop@centos elasticsearch-2.4.6]$ bin/plugin install mobz/elasticsearch-head

浏览器访问网址 http://centos.master:9200/_plugin/head/ 可以看到集群相关信息

 

[hadoop@centos elasticsearch-2.4.6]$ bin/plugin install lmenezes/elasticsearch-kopf

 

浏览器访问网址 http://centos.master:9200/_plugin/kopf/ 可以看到集群相关信息

 

[hadoop@centos elasticsearch-2.4.6]$ bin/plugin install delete-by-query

可以清除查询到索引类型数据

 

简繁体转换插件

项目地址：https://github.com/medcl/elasticsearch-analysis-stconvert 

mvn clean -X -U -Dmaven.test.skip=true package 编译打包

拷贝release下面的zip并解压到你的es plugins目录下面，重启ES即可

 

拼音插件

项目地址：https://github.com/medcl/elasticsearch-analysis-pinyin.git

 

IK分词插件

项目地址：https://github.com/medcl/elasticsearch-analysis-ik

 

启动各个节点的ElasticSearch服务

[hadoop@centos elasticsearch-2.4.6]$ bin/elasticsearch -d

 

单节点多个ES实例安装部署

在config目录下新建目录instance00、instance01、instance02，拷贝elasticsearch.yml、logging.yml文件至这三个目录下。修改配置文件如下：

cluster.name: elasticsearch
node.name: node-00
path.data: /home/hadoop/software/elasticsearch-2.4.6/data/00
path.logs: /home/hadoop/software/elasticsearch-2.4.6/logs/00
bootstrap.mlockall: true
network.host: 192.168.10.20
http.port: 9200
transport.tcp.port: 9300
discovery.zen.ping.unicast.hosts: ["192.168.10.20:9300"]

 

cluster.name: elasticsearch
node.name: node-01
path.data: /home/hadoop/software/elasticsearch-2.4.6/data/01
path.logs: /home/hadoop/software/elasticsearch-2.4.6/logs/01
bootstrap.mlockall: true
network.host: 192.168.10.20
http.port: 9201
transport.tcp.port: 9301
discovery.zen.ping.unicast.hosts: ["192.168.10.20:9300"]

 

cluster.name: elasticsearch
node.name: node-02
path.data: /home/hadoop/software/elasticsearch-2.4.6/data/02
path.logs: /home/hadoop/software/elasticsearch-2.4.6/logs/02
bootstrap.mlockall: true
network.host: 192.168.10.20
http.port: 9202
transport.tcp.port: 9302
discovery.zen.ping.unicast.hosts: ["192.168.10.20:9300"]


启动节点服务

$ bin/elasticsearch -d -Des.path.conf=config/instance00 -p /tmp/elasticsearch_00.pid

$ bin/elasticsearch -d -Des.path.conf=config/instance01 -p /tmp/elasticsearch_01.pid

$ bin/elasticsearch -d -Des.path.conf=config/instance02 -p /tmp/elasticsearch_02.pid

 

 

人生偌只如初见
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
【Elasticsearch】es 的配置集合
九师兄
10-27 2948
elasticsearch的config文件夹里面有两个配置文 件：elasticsearch.yml和logging.yml，第一个是es的基本配置文件，第二个是日志配置文件，es也是使用log4j来记录日 志的，所以logging.yml里的设置按普通log4j配置文件来设置就行了。下面主要讲解下elasticsearch.yml这个文件中可配置的东西。 cluster.name: elasticsearch 配置es的集群名称，默认是elasticsearch，es会自动发现在同一网段下的es，如果.
Kubernetes持久化部署elasticsearch7.15.0分布式集群
02-21
原文链接：https://blog.csdn.net/m0_37814112/article/details/122965720 说明：包含elasticsearch7.15.0集群3节点、5节点、7节点等三种方式的K8S部署yaml文件、镜像文件，里面有详细的README.txt部署参考
elasticsearch-8.6.1集群安装部署
weixin_47980221的博客
02-07 519
elk官方下载地址：https://www.elastic.co/cn/downloads/ 1、创建普通用户及用户组 groupadd elasticsearch useradd elasticsearch -g elasticsearch 2、 修改系统参数 修改最大连接数，/etc/security/limits.conf中添加两行 * soft nofile 65...
ElasticSearch单节点部署
liucy007的博客
12-08 2251
1. 虚拟机环境准备 准备一台虚拟机 操作系统：CentOS 7.x 64 bit 客户端连接工具：FinalShell 关闭虚拟机的防火墙 systemctl stop firewalld.service #停止firewall systemctl disable firewalld.service #禁止firewall开机启动 firewall-cmd --state # 查看防火墙 Elasticsearch Single-Node Mode部署 我们在虚拟机上部署Single-Node Mod
Elasticsearc最新版8.6.1集群安装教程
人工智能
01-29 3665
分片是数据的容器，数据保存在分片内，分片又被分配到集群内的各个节点里。副本，英文叫做 Replica，同样顾名思义，副本就是对原分片的复制，和原分片的内容是一样的，Elasticsearch 默认会生成一份副本，所以相当于是五个原分片和五个分片副本，相当于一份数据存了两份，并分了十个分片，当然副本的数量也是可以自定义的。首先解答上面的问题，一台主机宕机了，这台主机里面存的数据依然是可以被访问到的，因为在其他的主机上也有备份，但备份的时候也不是整台主机备份，是分片备份的，那这里就又引出了一个概念——分片。
Linux环境Elasticsearch集群部署及kibana安装笔记
01-09
Elasticsearch集群部署及kibana安装笔记Elasticsearch集群部署部署步骤1. 使用root账户创建用户2. 上次相关安装包3. 安装java（如已经安装，可不需要重复）4. 安装ES5. JVM 配置6. 修改系统配置7. 启动elasticsearch...
Elasticsearch集群模式部署
06-30
学习总结资料
Elasticsearch-5.4.3集群部署文档.pdf
11-23
旨在为实施人员提供elasticsearch的集群安装部署操作指南，有需要的可以下载有需要的可以下载
elasticsearch-analysis-ik-8.11.0
最新发布
11-27
elasticsearch-8.11.0的分词器，配合es同版本使用，有粗粒度和细粒度分词
elastic单节点安装部署
dingzfang的专栏
01-16 2819
elastic单机安装部署： 1.安装Java7 注意设置环境变量JAVA_HOME 2.下载 http://www.elasticsearch.org/overview/elkdownloads/ 3.解压安装 解压elasticsearch mkdir   -p    /usr/local/search cp   /opt/ela
ES部署+Kibana部署+IK分词器(单节点)
qq_36602951的博客
12-06 2146
es部署+Kibana部署+IK分词器
linux安装es8.6.0，安装ik8.6.0分词器，安装kibana8.6.0
qq_43054097的博客
02-15 796
es安装
ElasticSearch集群部署、优化和中文分词器ik部署
藏经阁
04-25 907
本节内容： Elasticsearch介绍 Elasticsearch集群安装部署 Elasticsearch优化 安装插件：中文分词器ik 一、Elasticsearch介绍 Elasticsearch是一个分布式搜索服务，提供Restful API，底层基于Lucene，采用多shard的方式保证数据安全，并且提供自动resharding的功能，加之github等大型的站点也采...
ElasticSearch 部署及安装ik分词器
不忘初心，方得始终
04-23 2498
公司es集群现以三个角色部署分别为 Gateway、Master、Data 简单的理解可以理解为在每台机器上部署了三个es，以端口和配置文件来区分这三个es不同的功能。我们知道本来安装分词器是件特别简单的事网上的教程也是一大片一大片的，在我们的环境和架构下在es 5.5版本之后就不需要修改es的配置文件进行配置分词器了。还有一定要用es对应版本的分词器，否则启动的时候会有报错。启动用户：elasticsearch su elasticsearch路径：/opt 三个es进程。
Elasticsearch8版本安装详解，单节点部署、多节点部署、冷热温集群部署、IK分词器安装、简单生产安全模式配置
timber wolf
05-30 8160
Elasticsearch8版本安装详解，单节点部署、多节点部署、冷热温集群部署、IK分词器安装、简单生产安全模式配置，配置文件参数基础
elasticsearch之analysis
米二的博客
07-24 828
文章目录1. 什么是analysis?2. 主要组成3. 使用分析器3.1 Elasticsearch的内置分析器3.2 分析器测试3.3 自定义分析器4. 分析器作用位置及使用4.1 创建索引时指定分析器4.2 搜索时如何确定分析器5. 常用分析器5.1 繁简转换分析器5.1.1 安装与验证5.1.2 插件介绍5.1.3 简转繁5.1.4 繁转简5.2 Ik分析器5.2.1 安装与验证5.2.2 插件介绍5.2.3 基本使用5.2.4 自定义分词库5.3 同义词分析器5.4 拼音分析器 1. 什么是ana
ElasticSearch学习笔记-Vector向量搜索记录
PURSUE ONE PIECE
09-10 8691
在Elasticsearch 7.0中，ES引入了高维向量的字段类型： dense_vector存储稠密向量，value是单一的float数值，可以是0、负数或正数，dense_vector数组的最大长度不能超过1024，每个文档的数组长度可以不同。 sparse_vector存储稀疏向量，value是单一的float数值，可以是0、负数或正数，sparse_vector存储的是个非嵌套类型的...
ElasticSearch2.4.6的安装部署以及集群部署、ElasticSearch-head等插件的安装
05-25
Elasticsearch是一个基于Lucene的搜索服务器，提供分布式多用户能力的全文搜索引擎，支持RESTful接口，我们可以使用它来进行数据的存储、检索和分析等操作。下面是ElasticSearch2.4.6的安装部署以及集群部署、ElasticSearch-head等插件的安装。 ## 安装部署 ### 1. 下载ElasticSearch2.4.6 从官网下载ElasticSearch2.4.6：https://www.elastic.co/downloads/past-releases/elasticsearch-2-4-6 ### 2. 解压缩 将下载好的文件解压缩到指定目录： ``` tar -xzvf elasticsearch-2.4.6.tar.gz -C /usr/local/ ``` ### 3. 修改配置文件 修改`/usr/local/elasticsearch-2.4.6/config/elasticsearch.yml`文件，主要修改以下几项： ``` cluster.name: my-elasticsearch-cluster node.name: my-elasticsearch-node-1 network.host: 0.0.0.0 http.port: 9200 ``` 其中`cluster.name`表示集群名称，`node.name`表示节点名称，`network.host`表示绑定的IP地址，`http.port`表示http监听端口。 ### 4. 启动ElasticSearch 运行以下命令启动Elasticsearch： ``` cd /usr/local/elasticsearch-2.4.6/bin/ ./elasticsearch ``` ### 5. 验证安装 使用浏览器访问`http://localhost:9200/`，如果返回以下信息则表示安装成功： ``` { "name" : "my-elasticsearch-node-1", "cluster_name" : "my-elasticsearch-cluster", "version" : { "number" : "2.4.6", "build_hash" : "5376dca9f70f3abef96a77f4bb22720ace8240fd", "build_timestamp" : "2017-07-18T12:17:44Z", "build_snapshot" : false, "lucene_version" : "5.5.4" }, "tagline" : "You Know, for Search" } ``` ## 集群部署 ### 1. 修改配置文件 在每个节点的`/usr/local/elasticsearch-2.4.6/config/elasticsearch.yml`文件中添加以下内容： ``` cluster.name: my-elasticsearch-cluster node.name: my-elasticsearch-node-1 network.host: 0.0.0.0 http.port: 9200 discovery.zen.ping.unicast.hosts: ["192.168.1.101", "192.168.1.102", "192.168.1.103"] ``` 其中`discovery.zen.ping.unicast.hosts`表示集群中所有节点的IP地址列表。 ### 2. 启动节点 分别在每个节点上启动Elasticsearch： ``` cd /usr/local/elasticsearch-2.4.6/bin/ ./elasticsearch ``` ### 3. 验证集群 使用浏览器访问`http://localhost:9200/_cat/nodes?v`，如果返回以下信息则表示集群启动成功： ``` ip heap.percent ram.percent cpu load_1m load_5m load_15m node.role master name 192.168.1.101 34 98 3 0.00 0.01 0.05 mdi * my-elasticsearch-node-1 192.168.1.102 36 99 0 0.00 0.01 0.05 mdi - my-elasticsearch-node-2 192.168.1.103 31 98 2 0.00 0.01 0.05 mdi - my-elasticsearch-node-3 ``` ## ElasticSearch-head等插件的安装 ### 1. 安装Node.js和npm ElasticSearch-head是一个基于浏览器的Elasticsearch集群管理工具，需要安装Node.js和npm才能使用。使用以下命令安装Node.js和npm： ``` sudo apt-get update sudo apt-get install nodejs npm ``` ### 2. 安装ElasticSearch-head 使用以下命令安装ElasticSearch-head： ``` sudo npm install -g grunt-cli git clone git://github.com/mobz/elasticsearch-head.git cd elasticsearch-head npm install ``` ### 3. 启动ElasticSearch-head 使用以下命令启动ElasticSearch-head： ``` grunt server & ``` 打开浏览器，访问`http://localhost:9100/`，即可打开ElasticSearch-head界面。 至此，ElasticSearch2.4.6的安装部署以及集群部署、ElasticSearch-head等插件的安装完成。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值