docker搭建分布式Elasticsearch集群(最简单教程)

于 2020-11-04 12:16:10 发布
阅读量979 收藏 3
点赞数
文章标签： elasticsearch 分布式 docker
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_41678224/article/details/109487846
版权

docker搭建分布式Elasticsearch集群

主机
  • node1:192.168.50.21
  • node2:192.168.50.22
  • node3:192.168.50.23
环境依赖
  • Jdk1.8
  • docker
  • root权限
搭建步骤（确保已经安装docker和jdk1.8）

  1. 切换root权限

    sudo -i

  2. 创建es文件夹

    mkdir /data/docker_elasticsearch

  3. 创建脚本文件并编写脚本

    • node1

      1. 新建脚本文件create_ES_cluster_node1.sh

        vim /data/docker_elasticsearch/create_ES_cluster_node1.sh

      2. 写入以下脚本

        sudo mkdir -p /data/docker_elasticsearch/config
sudo mkdir -p /data/docker_elasticsearch/data
sudo mkdir -p /data/docker_elasticsearch/logs
sudo mkdir -p /data/docker_elasticsearch/plugins
sudo chmod -R 775 /data/docker_elasticsearch
sudo cat <<EOF >/data/docker_elasticsearch/config/elasticsearch.yml
#集群名称
cluster.name: my-es
#当前该节点的名称
node.name: node-1
#是不是有资格竞选主节点
node.master: true
#是否存储数据
node.data: true
#最大集群节点数
node.max_local_storage_nodes: 3
#数据存档位置
path.data: /usr/share/elasticsearch/data
#日志存放位置
path.logs: /usr/share/elasticsearch/logs
#设置网关地址，我是被这个坑死了，这个地址我原先填写了自己的实际物理IP地址，
#然后启动一直报无效的IP地址，无法注入9300端口，这里只需要填写0.0.0.0
network.host: 0.0.0.0
#设置其它结点和该结点交互的ip地址，如果不设置它会自动判断，值必须是个真实的ip地址，设置当前物理机地址,
#如果是docker安装节点的IP将会是配置的IP而不是docker网管ip
network.publish_host: 192.168.50.21
#设置映射端口
http.port: 9200
#内部节点之间沟通端口
transport.tcp.port: 9300
#集群发现默认值为127.0.0.1:9300,如果要在其他主机上形成包含节点的群集,如果搭建集群则需要填写
#es7.x 之后新增的配置，写入候选主节点的设备地址，在开启服务后可以被选为主节点，也就是说把所有的节点都写上
discovery.seed_hosts: ["192.168.50.21:9300","192.168.50.22:9300","192.168.50.23:9300"]
#当你在搭建集群的时候，选出合格的节点集群，有些人说的太官方了，
#其实就是，让你选择比较好的几个节点，在你节点启动时，在这些节点中选一个做领导者，
#如果你不设置呢，elasticsearch就会自己选举，这里我们把三个节点都写上
cluster.initial_master_nodes: ["node-1","node-2","node-3"]
#在群集完全重新启动后阻止初始恢复，直到启动N个节点
#简单点说在集群启动后，至少复活多少个节点以上，那么这个服务才可以被使用，否则不可以被使用，
gateway.recover_after_nodes: 2
http.cors.enabled: true
http.cors.allow-origin: "*"
EOF
sudo docker run -e ES_JAVA_OPTS="-Xms512m -Xmx512m" -d -p 9200:9200 -p 9300:9300 -v /data/docker_elasticsearch/config/elasticsearch.yml:/usr/share/elasticsearch/config/elasticsearch.yml -v /data/docker_elasticsearch/plugins:/usr/share/elasticsearch/plugins -v /data/docker_elasticsearch/data:/usr/share/elasticsearch/data -v /data/docker_elasticsearch/logs:/usr/share/elasticsearch/logs --name es-node-1 elasticsearch:7.6.1

    • node2

      1. 新建脚本文件create_ES_cluster_node2.sh

        vim /data/docker_elasticsearch/create_ES_cluster_node2.sh

      2. 写入脚本

        sudo mkdir -p /data/docker_elasticsearch/config
sudo mkdir -p /data/docker_elasticsearch/data
sudo mkdir -p /data/docker_elasticsearch/logs
sudo mkdir -p /data/docker_elasticsearch/plugins
sudo chmod -R 775 /data/docker_elasticsearch
sudo cat <<EOF >/data/docker_elasticsearch/config/elasticsearch.yml
#集群名称
cluster.name: my-es
#当前该节点的名称
node.name: node-2
#是不是有资格竞选主节点
node.master: true
#是否存储数据
node.data: true
#最大集群节点数，这个参数可改，我这里只有三个节点
node.max_local_storage_nodes: 3
#数据存档位置
path.data: /usr/share/elasticsearch/data
#日志存放位置
path.logs: /usr/share/elasticsearch/logs
#设置网关地址，我是被这个坑死了，这个地址我原先填写了自己的实际物理IP地址，
#然后启动一直报无效的IP地址，无法注入9300端口，这里只需要填写0.0.0.0
network.host: 0.0.0.0
#设置其它结点和该结点交互的ip地址，如果不设置它会自动判断，值必须是个真实的ip地址，设置当前物理机地址,
#如果是docker安装节点的IP将会是配置的IP而不是docker网管ip
network.publish_host: 192.168.50.22
#设置映射端口
http.port: 9200
#内部节点之间沟通端口
transport.tcp.port: 9300
#集群发现默认值为127.0.0.1:9300,如果要在其他主机上形成包含节点的群集,如果搭建集群则需要填写
#es7.x 之后新增的配置，写入候选主节点的设备地址，在开启服务后可以被选为主节点，也就是说把所有的节点都写上
discovery.seed_hosts: ["192.168.50.21:9300","192.168.50.22:9300","192.168.50.23:9300"]
#当你在搭建集群的时候，选出合格的节点集群，有些人说的太官方了，
#其实就是，让你选择比较好的几个节点，在你节点启动时，在这些节点中选一个做领导者，
#如果你不设置呢，elasticsearch就会自己选举，这里我们把三个节点都写上
cluster.initial_master_nodes: ["node-1","node-2","node-3"]
#在群集完全重新启动后阻止初始恢复，直到启动N个节点
#简单点说在集群启动后，至少复活多少个节点以上，那么这个服务才可以被使用，否则不可以被使用，
gateway.recover_after_nodes: 2
http.cors.enabled: true
http.cors.allow-origin: "*"
EOF
sudo docker run -e ES_JAVA_OPTS="-Xms512m -Xmx512m" -d -p 9200:9200 -p 9300:9300 -v /data/docker_elasticsearch/config/elasticsearch.yml:/usr/share/elasticsearch/config/elasticsearch.yml -v /data/docker_elasticsearch/plugins:/usr/share/elasticsearch/plugins -v /data/docker_elasticsearch/data:/usr/share/elasticsearch/data -v /data/docker_elasticsearch/logs:/usr/share/elasticsearch/logs --name es-node-2 elasticsearch:7.6.1

    • node3

      • 新建脚本文件create_ES_cluster_node3.sh

        vim /data/docker_elasticsearch/create_ES_cluster_node3.sh

      • 写入脚本

        sudo mkdir -p /data/docker_elasticsearch/config
sudo mkdir -p /data/docker_elasticsearch/data
sudo mkdir -p /data/docker_elasticsearch/logs
sudo mkdir -p /data/docker_elasticsearch/plugins
sudo chmod -R 775 /data/docker_elasticsearch
sudo cat <<EOF >/data/docker_elasticsearch/config/elasticsearch.yml
#集群名称
cluster.name: my-es
#当前该节点的名称
node.name: node-3
#是不是有资格竞选主节点
node.master: true
#是否存储数据
node.data: true
#最大集群节点数，这个参数可改，我这里只有三个节点
node.max_local_storage_nodes: 3
#数据存档位置
path.data: /usr/share/elasticsearch/data
#日志存放位置
path.logs: /usr/share/elasticsearch/logs
#设置网关地址，我是被这个坑死了，这个地址我原先填写了自己的实际物理IP地址，
#然后启动一直报无效的IP地址，无法注入9300端口，这里只需要填写0.0.0.0
network.host: 0.0.0.0
#设置其它结点和该结点交互的ip地址，如果不设置它会自动判断，值必须是个真实的ip地址，设置当前物理机地址,
#如果是docker安装节点的IP将会是配置的IP而不是docker网管ip
network.publish_host: 192.168.50.23
#设置映射端口
http.port: 9200
#内部节点之间沟通端口
transport.tcp.port: 9300
#集群发现默认值为127.0.0.1:9300,如果要在其他主机上形成包含节点的群集,如果搭建集群则需要填写
#es7.x 之后新增的配置，写入候选主节点的设备地址，在开启服务后可以被选为主节点，也就是说把所有的节点都写上
discovery.seed_hosts: ["192.168.50.21:9300","192.168.50.22:9300","192.168.50.23:9300"]
#当你在搭建集群的时候，选出合格的节点集群，有些人说的太官方了，
#其实就是，让你选择比较好的几个节点，在你节点启动时，在这些节点中选一个做领导者，
#如果你不设置呢，elasticsearch就会自己选举，这里我们把三个节点都写上
cluster.initial_master_nodes: ["node-1","node-2","node-3"]
#在群集完全重新启动后阻止初始恢复，直到启动N个节点
#简单点说在集群启动后，至少复活多少个节点以上，那么这个服务才可以被使用，否则不可以被使用，
gateway.recover_after_nodes: 2
http.cors.enabled: true
http.cors.allow-origin: "*"
EOF
sudo docker run -e ES_JAVA_OPTS="-Xms512m -Xmx512m" -d -p 9200:9200 -p 9300:9300 -v /data/docker_elasticsearch/config/elasticsearch.yml:/usr/share/elasticsearch/config/elasticsearch.yml -v /data/docker_elasticsearch/plugins:/usr/share/elasticsearch/plugins -v /data/docker_elasticsearch/data:/usr/share/elasticsearch/data -v /data/docker_elasticsearch/logs:/usr/share/elasticsearch/logs --name es-node-3 elasticsearch:7.6.1

  4. 运行脚本

    /data/docker_elasticsearch/create_ES_cluster_node1.sh  # node1上运行
/data/docker_elasticsearch/create_ES_cluster_node2.sh  # node2上运行
/data/docker_elasticsearch/create_ES_cluster_node3.sh  # node3上运行

  5. 检查集群是否搭建成功

    浏览器输入：

    http://192.168.50.21:9200/_cat/nodes?pretty # 这里的ip是集群中的任意一个ip

    显示类似如下的东东，表示搭建成功：

    192.168.50.23 16 71 1 0.25 0.19 0.19 dilm - node-3
192.168.50.21 19 52 9 1.07 1.37 3.32 dilm - node-1
192.168.50.22 14 50 4 0.48 0.48 0.93 dilm * node-2
注意：
  • 每个脚本的里面的ip都需要换成你自己机器的ip
  • 脚本里面的集群name要保持一致
  • docker命令的名字可改可不改
docker的使用

  • 查看本地镜像

    docker image ls

  • 查看所有容器

    docker ps -a

  • 查看正在运行的容器

    docker ps

  • 开启容器

    docker start container_id # 容器id

  • 停止容器

    docker stop container_id # 容器id

  • 删除本地镜像

    docker rmi image_id # 镜像id

  • 删除容器

    docker rm container_id # 容器id

  • 查看容器启动日志

    docker logs --since 30m container_id # 容器id  可以查看容器启动的日志，有时容器启动秒退，这里可以找到错误日志，根据日志去做修改

  • 注意：在删除容器之前，必须停掉容器，在删除镜像之前，必须先删除容器。

参考

Docker 搭建elasticsearch 7.6.x集群

发糕学编程
关注
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值