使用docker搭建elasticsearch集群

最新推荐文章于 2024-05-12 07:56:34 发布
最新推荐文章于 2024-05-12 07:56:34 发布
阅读量480 收藏 1
点赞数
文章标签： elasticsearch docker 搜索引擎 es集群 elasticsearch集群
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_45753881/article/details/129361239
版权

环境：centoOS7，es7.1.1
服务器ip为192.168.xxx.xx ，搭建3个es节点，三个节点分别使用端口为（9200，9300），（9201，9301），（9203，9303）

1.拉取es镜像
docker pull elk/elasticsearch:7.1.1
2.准备映射路径及配置文件
1.创建数据路径
(1)/root/es_cluster/data/data01
(2)/root/es_cluster/data/data02
(3)/root/es_cluster/data/data03
2.创建日志路径
(1)/root/es_cluster/logs/logs01
(2)/root/es_cluster/logs/logs02
(3)/root/es_cluster/logs/logs03
3.创建映射文件
(1)/root/es_cluster/conf/es01/elasticsearch.yml
(2)/root/es_cluster/conf/es02/elasticsearch.yml
(3)/root/es_cluster/conf/es03/elasticsearch.yml
4.很重要的一点，给以上文件路径开放权限
chmod chmod 777 -R /root/es_cluster
3.配置文件
3.1节点1的配置文件
cluster.name: es_cluster
node.name: es01
# 是否主节点
node.master: true
# 是否数据节点
node.data: true
#设置分片数 默认5
#index.number_of_shards: 6
#副本个数
#index.number_of_replicas: 3
# 存储设置
path.data: /usr/share/elasticsearch/data
path.logs: /usr/share/elasticsearch/logs
#设置日志级别 调试可以用trace或者debug
logger.org.elasticsearch.transport: debug
# 网络设置 publish_host写具体的服务器的ip地址
network.publish_host: 192.168.xxx.xx
#这里配置0.0.0.0是为了外部可以通过localhost或者具体IP都可以访问
network.host: 0.0.0.0
#集群间通信端口 三个配置文件分别是 9300 9302 9303
transport.tcp.port: 9300
#是否压缩 这个属性后期会废弃掉
#transport.tcp.compress: true
#外界访问使用的端口 本例使用9200 9202 9203
http.port: 9200
http.max_content_length: 100mb
#配置跨域
#http.cors.enabled: true
#http.cors.allow-origin: '*'
#初始化数据恢复时并发恢复线程的个数 默认是4
#cluster.routing.allocation.node_initial_primaries_recoveries: 4
#添加删除节点或负载均衡时并发恢复线程的个数 默认是4
#cluster.routing.allocation.node_concurrent_recoveries: 2
#设置数据恢复时限制的带宽 0为无限制 之前版本使用 max_size_per_sec
indices.recovery.max_bytes_per_sec: 0
#设置这个参数保证集群中的节点可以知道其他N个有master资格的节点 默认为1
discovery.zen.minimum_master_nodes: 1
#集群中自动发现其他节点时ping连接超时时间 默认为3s
discovery.zen.ping_timeout: 3s
#这个超时新版本改了 改成了上面的discovery.zen.ping_timeout
#discovery.zen.ping.timeout: 3s
#是否打开多播发现节点 默认是true
#discovery.zen.ping.multicast.enabled: false
#设置新节点启动时能够发现的主节点列表 一定要注意这里的端口是9300对应的端口 本例就是9300 9302 9303 三个配置文件一致
discovery.zen.ping.unicast.hosts: ['192.168.xxx.xx:9300','192.168.xxx.xx:9302','192.168.xxx.xx:9303']
#新版本增加了初始化主节点配置 可以使用节点名称标识
cluster.initial_master_nodes: ['es01']
3.2节点2的配置文件
cluster.name: es_cluster
node.name: es02
# 是否主节点
node.master: true
# 是否数据节点
node.data: true
#设置分片数 默认5
#index.number_of_shards: 6
#副本个数
#index.number_of_replicas: 3
# 存储设置
path.data: /usr/share/elasticsearch/data
path.logs: /usr/share/elasticsearch/logs
#设置日志级别 调试可以用trace或者debug
logger.org.elasticsearch.transport: debug
# 网络设置 publish_host写具体的服务器的ip地址
network.publish_host: 192.168.xxx.xx
#这里配置0.0.0.0是为了外部可以通过localhost或者具体IP都可以访问
network.host: 0.0.0.0
#集群间通信端口 三个配置文件分别是 9300 9302 9303
transport.tcp.port: 9302
#是否压缩 这个属性后期会废弃掉
#transport.tcp.compress: true
#外界访问使用的端口 本例使用9200 9202 9203
http.port: 9202
http.max_content_length: 100mb
#配置跨域
#http.cors.enabled: true
#http.cors.allow-origin: '*'
#初始化数据恢复时并发恢复线程的个数 默认是4
#cluster.routing.allocation.node_initial_primaries_recoveries: 4
#添加删除节点或负载均衡时并发恢复线程的个数 默认是4
#cluster.routing.allocation.node_concurrent_recoveries: 2
#设置数据恢复时限制的带宽 0为无限制 之前版本使用 max_size_per_sec
indices.recovery.max_bytes_per_sec: 0
#设置这个参数保证集群中的节点可以知道其他N个有master资格的节点 默认为1
discovery.zen.minimum_master_nodes: 1
#集群中自动发现其他节点时ping连接超时时间 默认为3s
discovery.zen.ping_timeout: 3s
#这个超时新版本改了 改成了上面的discovery.zen.ping_timeout
#discovery.zen.ping.timeout: 3s
#是否打开多播发现节点 默认是true
#discovery.zen.ping.multicast.enabled: false
#设置新节点启动时能够发现的主节点列表 一定要注意这里的端口是9300对应的端口 本例就是9300 9302 9303 三个配置文件一致
discovery.zen.ping.unicast.hosts: ['192.168.xxx.xx:9300','192.168.xxx.xx:9302','192.168.xxx.xx:9303']
#新版本增加了初始化主节点配置 可以使用节点名称标识
cluster.initial_master_nodes: ['es01']
3.3节点3的配置文件
cluster.name: es_cluster
node.name: es03
# 是否主节点
node.master: true
# 是否数据节点
node.data: true
#设置分片数 默认5
#index.number_of_shards: 6
#副本个数
#index.number_of_replicas: 3
# 存储设置
path.data: /usr/share/elasticsearch/data
path.logs: /usr/share/elasticsearch/logs
#设置日志级别 调试可以用trace或者debug
logger.org.elasticsearch.transport: debug
# 网络设置 publish_host写具体的服务器的ip地址
network.publish_host: 192.168.xxx.xx
#这里配置0.0.0.0是为了外部可以通过localhost或者具体IP都可以访问
network.host: 0.0.0.0
#集群间通信端口 三个配置文件分别是 9300(9301) 9302 9303
transport.tcp.port: 9303
#是否压缩 这个属性后期会废弃掉
#transport.tcp.compress: true
#外界访问使用的端口 本例使用9200(9201) 9202 9203
http.port: 9203
http.max_content_length: 100mb
#配置跨域
#http.cors.enabled: true
#http.cors.allow-origin: '*'
#初始化数据恢复时并发恢复线程的个数 默认是4
#cluster.routing.allocation.node_initial_primaries_recoveries: 4
#添加删除节点或负载均衡时并发恢复线程的个数 默认是4
#cluster.routing.allocation.node_concurrent_recoveries: 2
#设置数据恢复时限制的带宽 0为无限制 之前版本使用 max_size_per_sec
indices.recovery.max_bytes_per_sec: 0
#设置这个参数保证集群中的节点可以知道其他N个有master资格的节点 默认为1
discovery.zen.minimum_master_nodes: 1
#集群中自动发现其他节点时ping连接超时时间 默认为3s
discovery.zen.ping_timeout: 3s
#这个超时新版本改了 改成了上面的discovery.zen.ping_timeout
#discovery.zen.ping.timeout: 3s
#是否打开多播发现节点 默认是true
#discovery.zen.ping.multicast.enabled: false
#设置新节点启动时能够发现的主节点列表 一定要注意这里的端口是9300对应的端口 本例就是9300 9302 9303 三个配置文件一致
discovery.zen.ping.unicast.hosts: ['192.168.xxx.xx:9300','192.168.xxx.xx:9302','192.168.xxx.xx:9303']
#新版本增加了初始化主节点配置 可以使用节点名称标识
cluster.initial_master_nodes: ['es01']
4.创建容器
4.1创建并启动节点1容器
docker run -d --name es-node1 -p 9200:9200 -p 9300:9300 -v /root/es_cluster/data/data01:/usr/share/elasticsearch/data -v /root/es_cluster/logs/logs01:/usr/share/elasticsearch/logs -v /root/es_cluster/conf/es01/elasticsearch.yml:/usr/share/elasticsearch/config/elasticsearch.yml -e TZ=Asia/Shanghai -e ES_JAVA_OPTS="-Xms6g -Xmx6g" -e TAKE_FILE_OWNERSHIP=true --restart unless-stopped elk/elasticsearch:7.1.1
4.2创建并启动节点2容器
docker run -d --name es-node1 -p 9202:9202 -p 9302:9302 -v /root/es_cluster/data/data01:/usr/share/elasticsearch/data -v /root/es_cluster/logs/logs01:/usr/share/elasticsearch/logs -v /root/es_cluster/conf/es01/elasticsearch.yml:/usr/share/elasticsearch/config/elasticsearch.yml -e TZ=Asia/Shanghai -e ES_JAVA_OPTS="-Xms6g -Xmx6g" -e TAKE_FILE_OWNERSHIP=true --restart unless-stopped elk/elasticsearch:7.1.1
4.3创建并启动节点3容器
docker run -d --name es-node1 -p 9203:9203 -p 9303:9303 -v /root/es_cluster/data/data01:/usr/share/elasticsearch/data -v /root/es_cluster/logs/logs01:/usr/share/elasticsearch/logs -v /root/es_cluster/conf/es01/elasticsearch.yml:/usr/share/elasticsearch/config/elasticsearch.yml -e TZ=Asia/Shanghai -e ES_JAVA_OPTS="-Xms6g -Xmx6g" -e TAKE_FILE_OWNERSHIP=true --restart unless-stopped elk/elasticsearch:7.1.1

如果容器日志报错

max virtual memory areas vm.max_map_count [65530] is too low, increase to at least [262144]

在服务器上执行sysctl -w vm.max_map_count=262144即可

就是叫这个名字
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Docker拉取并部署ElasticSearch服务
qq_45924173的博客
12-04 697
.
docker搭建ElasticSearch集群
qq_46127735的博客
06-07 2265
docker搭建ElasticSearch集群 创建挂载目录 进入config文件里面创建es配置文件 查询防火墙状态 关闭防火墙 （只执行这个，重启后不行，还必须执行在 目录下创建 es1.yml，es2.yml，es3.yml 编辑es1.yml 执行 命令 可以查看自己的宿主ip,找到 例如 ：es2.yml es3.yml 3.调高JVM线程数限制数量 在centos窗口中，修改配置 加入如下内容： 启用配置： 三、启动ElasticSearch集.........
基于Docker安装Elasticsearch【保姆级教程、内含图解】_docker elasticsearch
最新发布
2401_84139924的博客
05-12 1006
【摘自百度百科】Elasticsearch 是一个分布式、高扩展、高实时的搜索与数据分析引擎。它能很方便的使大量数据具有搜索、分析和探索的能力。充分利用Elasticsearch的水平伸缩性，能使数据在生产环境变得更有价值。Elasticsearch 的实现原理主要分为以下几个步骤，首先用户将数据提交到Elasticsearch 数据库中，再通过分词控制器去将对应的语句分词，将其权重和分词结果一并存入数据，当用户搜索数据时候，再根据权重将结果排名，打分，再将返回结果呈现给用户。
使用 Docker 拉取ElasticSearch镜像
weixin_45259565的博客
12-05 4488
使用 Docker 拉取ElasticSearch镜像 docker pull elasticsearch:7.0.0 查看镜像 ID docker images 运行 docker run -e ES_JAVA_OPTS="-Xms256m -Xmx256m" -d --name elasticsearch -p 9200:9200 -p 9300:9300 *****[注：这是要运行的...
ElasticSearch——全文检索
SherlockerSun的博客
11-23 2757
ElasticSearch——全文检索 来源【尚硅谷】-《谷粒商城高级篇》 一、简介 官网：https://www.elastic.co/cn/what-is/elasticsearch 全文搜索属于最常见的需求，开源的 Elasticsearch 是目前全文搜索引擎的首选。 它可以快速地储存、搜索和分析海量数据。维基百科、Stack Overflow、Github 都采用它 Elastic 的底层是开源库 Lucene。但是，你没法直接用 Lucene，必须自己写代码去调用它的 接口。Elastic 是
docker 部署es、kibana详细教程
sffSswww的博客
01-18 2068
关于docker部署elasticsearch,ik分词器，和kibana
Docker部署Elasticsearch集群
01-07
1、配置环境参数 cat /etc/hosts 172.16.1.1 test-es01 172.16.1.2 test-es02 172.16.1.3 test-es03 # grep vm.max_map_count /...mkdir -p /data/server/elasticsearch/{esdata01,esdata02,esdata03} chown 1000.
使用docker快速搭建Elasticsearch集群.pdf
11-23
总之，利用Docker搭建Elasticsearch集群是一项涉及系统配置、网络管理以及Elasticsearch配置的工作。通过合理配置，我们可以轻松地在本地或生产环境中快速部署和扩展Elasticsearch集群，满足各种数据搜索和分析的...
docker安装Elasticsearch7.6集群并设置密码
09-29
主要介绍了docker安装Elasticsearch7.6集群并设置密码，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
使用docker快速搭建Elasticsearch集群.docx
11-23
。。。
Elasticsearch最新版本7.6.0使用docker安装集群
01-07
今天使用docker安装elasticsearch最新版本7.6.0的集群环境.遇到了好多坑,最终完成搭建先整理安装步骤 1.先从docker hub下pull最新的es镜像 2.创建数据挂在目录,配置ElasticSearch集群配置文件，调高JVM线程数限制...
elasticsearch-sql docker 镜像
01-04
elasticsearch-sql docker 镜像 版本5.6.4 导入命令 docker import - elasticsearch-sql:5.6.5 < elasticsearch-sql.tar 启动命令 docker run \ --name elasticsearch-sql \ -p 8082:8080 \ -d \ --restart=always \ elasticsearch-sql:5.6.4
elasticsearch基于docker搭建集群
weixin_53604412的博客
03-24 1061
我们会在单机上利用docker容器运行多个es实例来模拟es集群。不过生产环境推荐大家每一台服务节点仅部署一个es的实例。部署es集群可以直接使用docker-compose来完成，但这要求你的Linux虚拟机至少有的内存空间。
docker搭建Elasticsearch集群
qq_43555873的博客
05-16 1114
.拉取es镜像 2.配置配置文件 3.启动容器 4.启动过程中遇到的问题 5.查看容器启动情况 elasticsearch 集群搭建，elasticsearch head
Docker搭建ElasticSearch集群
m0_52241823的博客
07-28 1543
docker搭建es集群
【EslaticSearch】ES安装部署
上官玺的博客
09-11 839
ES搜索引擎
Elasticsearch
北辰
11-30 840
Elaticsearch简称为ES，ES是一个开源的高扩展的分布式全文搜索引擎，是整个ElasticStack技术栈的核心。
docker安装elasticsearch（最详细版）
热门推荐
bright的博客
12-23 8万+
docker安装elasticsearch 1.设置max_map_count不能启动es会启动不起来 查看max_map_count的值 默认是65530 cat /proc/sys/vm/max_map_count 重新设置max_map_count的值 sysctl -w vm.max_map_count=262144 2.下载镜像并运行 #拉取镜像 docker pull elasticsearch:6.5.4 #启动镜像 docker run --name elasticsearch -d
Elasticsearch：验证 Elasticsearch Docker 镜像并安装 Elasticsearch
Elastic 中国社区官方博客
05-28 3054
验证 Elasticsearch Docker 镜像并安装 Elasticsearch。在某些环境中，准备包含你的配置的自定义映像可能更有意义。一些插件需要额外的安全权限。在运行 Docker 映像时附加 tty，并在出现提示时允许权限。通过将 --batch 标志添加到插件安装命令来检查安全权限并接受它们（如果适用）。有关更多信息，请参阅插件管理。
django-drf和docker搭建Elasticsearch集群
03-29
Django DRF和Docker是两个不同的技术，它们分别用于Web开发框架和容器化部署...以上是一些步骤来搭建Elasticsearch集群并在Django DRF应用程序中使用它。请注意，这只是一个示例，您可能需要根据您自己的需求进行调整。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值