Etcd快速集群

已于 2022-03-19 20:35:06 修改
阅读量1.3k 收藏
点赞数 2
分类专栏： # Etcd 文章标签： etcd 数据库 kubernetes
于 2022-02-19 09:59:59 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_53041251/article/details/123014734
版权

目录

1、概述

2、安装Etcd

3、创建etcd相关目录即数据文件(即数据文件和配置文件的保存目录)

4、编辑节点node-3配置文件

5、节点Etcd03创建一个Etcd服务

6、为其他节点重复2、3、4、5这4步骤，记得修改对应的IP。

7、重启Etcd服务并查看服务状态

8、测试集群

1、概述

Etcd构建自身高可用集群主要有三种形式：

静态发现：

预先已知Etcd集群中有哪些节点，在启动时通过--initial-cluster参数直接指定好etcd的各个节点地址。

Etcd动态发现：

静态配置前提是在搭建集群之前已经提前知道各节点的信息，而实际应用中可能存在预先并不知道各节点ip的情况，这时可通过已经搭建的Etcd来辅助搭建新的Etcd集群。

通过已有的Etcd集群作为数据交互点，然后在扩展新的集群时实现通过已有集群进行服务发现的机制。比如官方提供的：discovery.etcd.io 。

DNS动态发现: 通过DNS查询方式获取其他节点地址信息。

本篇博客将介绍如何通过静态发现这种方式来部署一个etcd集群，这种方式也是最简单的。

注：通常都是将集群节点部署为3，5，7，9个节点，为什么不能选择偶数个节点？

  1. 偶数个节点集群不可用风险更高，表现在选主过程中，有较大概率或等额选票，从而触发下一轮选举。
  2. 偶数个节点集群在某些网络分割的场景下无法正常工作。当网络分割发生后，将集群节点对半分割开。 此时集群将无法工作。按照RAFT协议，此时集群写操作无法使得大多数节点同意，从而导致写失败，集群无法正常工作。

2、安装Etcd

1.创建并切换到下载目录。

mkdir -p /usr/local/mytools && cd /usr/local/mytools

注：-p参数作用：没有父目录也可以创建，否则报错

2.直接下载速度太慢，建议提前下载安装包再用rz上传。

https://github.com/etcd-io/etcd/releases/download/v3.4.3/etcd-v3.4.3-linux-amd64.tar.gz

3.解压文件到当前目录 。

 tar xzvf etcd-v3.4.3-linux-amd64.tar.gz

4.切换至etcd根目录，运行查看命令ls，里面会有一些文档和2个二进制文件etcd和etcdctl。etcd是server端，etcdctl是客户端 。

cd etcd-v3.4.3-linux-amd64 && ls

 

5.将etcd和etcdctl二进制文件复制到/usr/local/bin目录，这样系统中可以直接调用etcd/etcdctl这两个程序。

cp etcd etcdctl /usr/local/bin

6.查看etcd版本

 etcd --version

3、创建etcd相关目录即数据文件(即数据文件和配置文件的保存目录)

mkdir -p /var/lib/etcd/ && mkdir -p /etc/etcd/

4、编辑节点node-3配置文件

注：

  • 重要的事情说三遍：修改/etc/etcd/etcd.conf文件要先删除/var/lib/etcd目录下保存的数据，再重新启用 服务，不然失败。
  • 重要的事情说三遍：修改/etc/etcd/etcd.conf文件要先删除/var/lib/etcd目录下保存的数据，再重新启用 服务，不然失败。
  • 重要的事情说三遍：修改/etc/etcd/etcd.conf文件要先删除/var/lib/etcd目录下保存的数据，再重新启用 服务，不然失败 。
 cd /var/lib/etcd && rm -rf *
 vim /etc/etcd/etcd.conf

把IP地址改成你自己的虚拟机或服务器IP地址

#########################################################
######  请根据各节点实际情况修改配置：1/3/4/5/6/7  ######
#########################################################
#[Member]
#1.节点名称，必须唯一
ETCD_NAME="etcd03"
​
#2.设置数据保存的目录
ETCD_DATA_DIR="/var/lib/etcd"
​
#3.用于监听其他etcd member的url
ETCD_LISTEN_PEER_URLS="http://192.168.58.134:2380"
​
#4.该节点对外提供服务的地址
ETCD_LISTEN_CLIENT_URLS="http://192.168.58.134:2379,http://127.0.0.1:2379"
​
#[Clustering]
#5.对外公告的该节点客户端监听地址
ETCD_ADVERTISE_CLIENT_URLS="http://192.168.58.134:2379"
​
#6.该节点成员对等URL地址，且会通告群集的其余成员节点
ETCD_INITIAL_ADVERTISE_PEER_URLS="http://192.168.58.134:2380"
​
#7.集群中所有节点的信息
ETCD_INITIAL_CLUSTER="etcd01=http://192.168.58.133:2380,etcd03=http://192.168.58.134:2380,etcd05=http://192.168.58.135:2380"
​
#8.创建集群的token，这个值每个集群保持唯一
ETCD_INITIAL_CLUSTER_TOKEN="etcd-cluster"
​
#9.初始集群状态，新建集群的时候，这个值为new；
ETCD_INITIAL_CLUSTER_STATE="new"
​
#10.flannel操作etcd使用的是v2的API，而kubernetes操作etcd使用的v3的API
#   为了兼容flannel，将默认开启v2版本，故配置文件中设置 
ETCD_ENABLE_V2="true"

5、节点Etcd03创建一个Etcd服务

 vim /etc/systemd/system/etcd.service

[Unit]
Description=Etcd Server
Documentation=https://github.com/etcd-io/etcd
After=network.target

[Service]
User=root
Type=notify
## 根据实际情况修改EnvironmentFile和ExecStart这两个参数值
## 1.EnvironmentFile即配置文件的位置，注意“-”不能少
EnvironmentFile=-/etc/etcd/etcd.conf
## 2.ExecStart即etcd启动程序位置
ExecStart=/usr/local/bin/etcd
Restart=always
RestartSec=10s
LimitNOFILE=65536

[Install]
WantedBy=multi-user.target

注1：如果是Centos7以上的系统，它都自带了firewalld防火墙，并使用firewalld作为防火墙，则需要开放端口2379和2380。

firewall-cmd --zone=public --add-port=2379/tcp --permanent && firewall-cmd --zone=public --add-port=2380/tcp --permanent && firewall-cmd --reload && firewall-cmd --list-port

开启防火墙

systemctl start firewalld.service

重启防火墙：

firewall-cmd --reload

查询有哪些端口是开启的:

firewall-cmd --list-port

注2：etcd 集群搭建，启动时候报错： master-16 etcd[25461]: request cluster ID mismatch (got bdd7c7c32bde1208 want 698851d67fea3c17)

集群ip地址变化后，除了修改/etc/etcd/etcd.conf 文件并重新启用服务外，还需要删除/var/lib/etcd目录下保存的数据；

解决办法：删除了etcd集群所有节点中的--data_dir的内容。 分析： 因为集群搭建过程，单独启动过单一etcd做为测试验证，集群内第一次启动其他etcd服务时候，是通过发现服务引导的，所以需要删除旧的成员信息 。

 cd /var/lib/etcd && rm -rf *

注3：集群ip地址变化后，除了修改/etc/etcd/etcd.conf 文件并重新启用服务外，还需要删除/var/lib/etcd目 录下保存的数据。

这里面包括两部分的数据，一是etcd数据库数据、二是etcd集成成员信息数据，都要删除。 数据库文件：${name}.etcd 成员数据文件：member/*

6、为其他节点重复2、3、4、5这4步骤，记得修改对应的IP。

注：etcd集群最少要同时启动2个节点，集群才能启动成功

7、重启Etcd服务并查看服务状态

所有节点都要执行。

systemctl daemon-reload && systemctl enable etcd && systemctl start etcd

如果启动失败，可通过如下命令查看原因

 systemctl status etcd.service

查看启动详情

 journalctl -xe

显示实时日志

 journalctl -f

查看本机监听端口

 netstat -tunlp|grep etcd

journalctl -xe -u etcd #查看日志细节

netstat -nal #查看接口

分析命令主要包括

systemctl list-unit-files: 列出所有可用的

Unit systemctl list-units: 列出所有正在运行的

Unit systemctl --failed: 列出所有失败单元

systemctl mask httpd.service: 禁用服务

ystemctl unmask httpd.service systemctl kill httpd:杀死服务

8、测试集群

各节点重启启动完成后，在任意节点执行etcdctl member list可列所有集群节点信息，如下所示:

1.etcdctl命令

 etcdctl member list
etcdctl member list -w table
etcdctl endpoint health
etcdctl endpoint status

2.http命令

etcdctl --endpoints=http://192.168.58.133:2379,http://192.168.58.134:2379,http://192.168.58.135:2379:2379 endpoint health
 etcdctl --endpoints=http://192.168.58.133:2379 endpoint health
etcdctl --endpoints=http://192.168.58.133:2379 member list -w table
Kubernetes实战（三十三）-外部Etcd集群部署与调优（更安全的数据存储策略）
专注基础架构领域
11-06 600
Etcd集群作为kubernetes集群的大脑，重要性不言而喻，但我好像没有对etcd集群做过一个全方面的总结，部署手法也只是单调的使用ansible快速部署，很多细节并没有说清楚，并且对于etcd集群部署后的性能调优也没有过多的提及。因此，本文将对etcd集群的由来，etcd集群的特点，etcd集群的部署手法，etcd应该注意的调优方案这些做一个全面的总结。
微服务自动化之etcd集群搭建
boy_10的博客
03-01 490
etcd构建自身高可用集群主要有三种形式： 静态发现: 预先已知etcd集群中有哪些节点，在启动时通过--initial-cluster参数直接指定好etcd的各个节点地址 etcd动态发现:静态配置前提是在搭建集群之前已经提前知道各节点的信息，而实际应用中可能存在预先并不知道各节点ip的情况， 这时可通过已经搭建的etcd来辅助搭建新的etcd集群。通过已有的etcd集群作为数据交互点，然后在扩展新的集群时 实现通过已有集群进行服务发现的机制。比如官方提供的：discovery.etcd.io D
etcd集群搭建
victor_zxl的博客
01-21 1191
部署为一个 systemd 服务，创建 systemd 服务配置文件 /usr/lib/systemd/system/etcd.service。地址：https://github.com/etcd-io/etcd/releases/tag/v3.4.13。2、使用 openssl 命令创建 etcd 的服务端 CA 证书。配置文件放置在 /etc/etcd/etcd.conf。如果哪一步执行错误可以通过以下脚本快速清理环境。可以选择关闭防火墙或者开放指定端口都行。3、再创建客户端使用的 CA 证书。
搭建ETCD集群及高可用
最新发布
m0_37660354的博客
08-25 281
ETCD 高可用安装及配置
Etcd集群搭建过程和命令总结
weixin_34174422的博客
08-03 496
什么是etcd？etcd是CoreOS团队于2013年6月发起的开源项目，它的目标是构建一个高可用的分布式键值数据库，基于Go语言实现。主要解决分布式系统中各种服务的配置信息的管理分享，服务的发现。 一、Etcd三节点集群配置：10.100.50.12310.100.50.12410.100.50.125https://github.com/coreos...
etcd 集群搭建
u010533742的博客
06-18 1486
mkdir /data/etcd/{data,bin} -p curl -L https://github.com/etcd-io/etcd/releases/download/v3.5.0/etcd-v3.5.0-linux-amd64.tar.gz -o /tmp/etcd-v3.5.0-linux-amd64.tar.gz tar zxvf /tmp/etcd-v3.5.0-linux-amd64.tar.gz -C /data/etcd cd /data/etcd/etcd-v3.5.0-linu
etcd集群管理
云南小伙闯深圳
05-06 3695
这里要吐槽一下：我用的是3.16，集群相关的好多命令行都已经改变了或者是根本用不了。 再次强调一下：一定关闭防火墙，不然无法加入新节点。 1、增加新节点 第一步： curl http://192.168.75.137:2379/v2/members -XPOST \ -H "Content-Type: application/json" -d '{"peerURLs":["htt
kubeadm初始化高可用k8s1.20.4集群-etcd集群独立在k8s集群外详细笔记资料包
06-27
kubeadm通过一系列命令行选项帮助用户快速地设置Kubernetes集群。在初始化过程中，kubeadm会执行以下主要步骤： 1. **环境准备**：确保所有节点满足硬件和软件需求，如安装必要的依赖，设置网络策略等。 2. **控制...
Etcd3静态集群部署
03-19
【Etcd3静态集群部署】是指在一组固定的服务器上设置Etcd3集群，以实现高可用性和数据一致性。Etcd3是由CoreOS团队在2013年开发的一个开源项目，设计目标是创建一个用于分布式系统中存储关键值数据的高可用服务。它...
使用Docker快速搭建etcd集群
"Docker搭建etcd集群" 在分布式系统中，etcd是一个关键的组件，它提供了一个可靠的、高可用的分布式键值存储，用于共享配置和服务发现。由CoreOS团队开发并用Go语言实现，etcd的特点包括简单易用（通过REST API交互...
集群-etcd
weixin_40976819的博客
03-12 103
集群-etcd 主要参考kubernetes高可用集群安装（二进制安装、v1.20.2版） 创建etcd角色 1.创建相关文件夹 mkdir roles/etcd/{files,handlers,tasks,templates} 2.编写task文件 vim roles/etcd/tasks/main.yaml --- # main.yaml主要是etcd角色的入口，文件的顺序就是ansible执行的顺序 - include: user.yaml - include: software.yaml - in
ETCD集群
0478
05-01 375
etcd 是一种开源的分布式统一键值存储，用于分布式系统或计算机集群的共享配置、服务发现和的调度协调。在 Kubernetes 运行过程中产生的重要数据都存储在 etcd 中。etcd 是集群的核心关键组件。etcd 目前支持 V2 和 V3 版本，两版本的 API 不兼容，k8s 使用 V3 作为存储协议使用 V2 版本 API: ETCDCTL_API=2 etcdctl （默认版本）使用 V3 版本 API: ETCDCTL_API=3 etcdctl。
Docker 系列之 docker-compose 部署 etcd 集群（三节点 + Keepalived）
火火火华的博客
08-15 1193
docker-compose 部署 etcd 集群（三节点 + Keepalived）
Etcd集群搭建
ZouChengli的博客
09-30 578
前言： 前面我提到k8s的高可用搭建，于是后面有人评论etcd用的master自己的还是外部的etcd集群。我回答是用master自带的，今天为了解决那个朋友提出的问题，我这里给搭建演示如何搭建一个外部etcd集群！好了废话不多说了，直接上干活。 准备三台虚拟机或实体机（CentOS7） IP HOSTNAME CPU/MEM/DISK OS ETCD VERSION 172.16.0.160 etcd00 4C/4G/16G CentOS7
搭建etcd集群
絮雨清风
01-30 639
  最近分布式项目开发中用到订阅/通知机制，经过选型决定采用etcd，在调研etcd使用方式、订阅/通知方案过程中遇到很多问题，这里做下简单记录。 本系列总共3篇： 《搭建etcd集群》：介绍搭建etcd集群方式、遇到的问题及处理方式； 《编译安装etcd-cpp-apiv3》：介绍etcd-cpp-apiv3编译安装方式、常见问题及处理方式； 《etcd-cpp-apiv3使用实例介绍》：介绍如何通过etcd-cpp-apiv3建立与etcd集群的连接，订阅etcd消息。  本文是第1篇 《搭建etc
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

叫我阿杰好了

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值