ETCD集群部署并开启身份认证

已于 2024-03-19 09:40:36 修改
阅读量2.1k 收藏 55
点赞数 33
文章标签： etcd 数据库
于 2024-01-16 17:08:04 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/guyougao/article/details/135629811
版权

一、ETCD集群部署

当时主要作为APISIX数据库，但是采用https协议时候apisix总是配置认证不生效，所以采用http形式部署，为了方便理解，以下存在的IP以及密码都为虚拟
三台机器分别为

主机名IP
etcd11.1.1.1
etcd21.1.1.2
etcd31.1.1.3

一、安装前的准备

在开始etcd的安装之前，需要做以下准备工作：

  1. 确定etcd集群的大小和节点数量：etcd集群的大小指的是集群中etcd节点的数量，一般建议至少部署3个节点。如果集群规模较大，可以考虑增加节点数量，以提高可用性和性能。
  2. 确定etcd节点的IP地址和主机名：每个etcd节点都需要有一个唯一的IP地址和主机名。这些信息将用于配置etcd集群。
  3. 确定etcd集群的通信端口：etcd集群使用的默认端口是2379和2380，如果需要使用其他端口，需要在配置文件中进行配置。
  4. 安装etcd二进制文件：etcd可以从官方网站（https://github.com/etcd-io/etcd/releases ）下载预编译的二进制文件，也可以通过源代码进行编译。本文将使用预编译的二进制文件进行安装。

二、安装ETCD集群

下载etcd二进制文件
从官方网站（https://github.com/etcd-io/etcd/releases ）下载适合自己操作系统的etcd二进制文件。本文以Linux为例，下载文件名为etcd-v3.5.11-linux-amd64.tar.gz的压缩包。
解压缩etcd二进制文件

1、创建工作目录,三台机器都需要执行

#运行文件
mkdir -p /data/service/etcd/bin/
#配置文件
mkdir -p /data/service/etcd/conf/
#日志信息
mkdir -p /data/service/etcd/log/
#数据信息，后续执行启动命令会自动创建
mkdir -p /data/service/etcd/data/

1.1 etcd1机器将下载的压缩包解压缩到指定的目录，例如：/data/service/etcd/bin

cd /data/service/etcd/
rz etcd-v3.5.11-linux-amd64.tar.gz
tar xzvf etcd-v3.5.11-linux-amd64.tar.gz -C /data/service/etcd/bin --strip-components=1

2、分发etcd软件

etcd1上执行

scp /data/service/etcd/bin/etcd* 1.1.1.2:/data/service/etcd/bin
scp /data/service/etcd/bin/etcd* 1.1.1.3:/data/service/etcd/bin

3、创建配置文件

三台机器上分别执行自己的配置信息

etcd1上执行

cat > /data/service/etcd/conf/etcd.conf <<EOF
#[Member]
ETCD_NAME="etcd-1"
ETCD_DATA_DIR="/data/service/etcd/data"
ETCD_LISTEN_PEER_URLS="http://1.1.1.1:2380"
ETCD_LISTEN_CLIENT_URLS="http://1.1.1.1:2379,http://127.0.0.1:2379"

#[Clustering]
ETCD_INITIAL_ADVERTISE_PEER_URLS="http://1.1.1.1:2380"
ETCD_ADVERTISE_CLIENT_URLS="http://1.1.1.1:2379"
ETCD_INITIAL_CLUSTER="etcd-1=http://1.1.1.1:2380,etcd-2=http://1.1.1.2:2380,etcd-3=http://1.1.1.3:2380"
ETCD_INITIAL_CLUSTER_TOKEN="etcd-cluster"
ETCD_INITIAL_CLUSTER_STATE="new"
EOF

etcd2上执行

cat > /data/service/etcd/conf/etcd.conf <<EOF
#[Member]
ETCD_NAME="etcd-2"
ETCD_DATA_DIR="/data/service/etcd/data"
ETCD_LISTEN_PEER_URLS="http://1.1.1.2:2380"
ETCD_LISTEN_CLIENT_URLS="http://1.1.1.2:2379,http://127.0.0.1:2379"

#[Clustering]
ETCD_INITIAL_ADVERTISE_PEER_URLS="http://1.1.1.2:2380"
ETCD_ADVERTISE_CLIENT_URLS="http://1.1.1.2:2379"
ETCD_INITIAL_CLUSTER="etcd-1=http://1.1.1.1:2380,etcd-2=http://1.1.1.2:2380,etcd-3=http://1.1.1.3:2380"
ETCD_INITIAL_CLUSTER_TOKEN="etcd-cluster"
ETCD_INITIAL_CLUSTER_STATE="new"
EOF

etcd3上执行

cat > /data/service/etcd/conf/etcd.conf <<EOF
#[Member]
ETCD_NAME="etcd-3"
ETCD_DATA_DIR="/data/service/etcd/data"
ETCD_LISTEN_PEER_URLS="http://1.1.1.3:2380"
ETCD_LISTEN_CLIENT_URLS="http://1.1.1.3:2379,http://127.0.0.1:2379"

#[Clustering]
ETCD_INITIAL_ADVERTISE_PEER_URLS="http://1.1.1.3:2380"
ETCD_ADVERTISE_CLIENT_URLS="http://1.1.1.3:2379"
ETCD_INITIAL_CLUSTER="etcd-1=http://1.1.1.1:2380,etcd-2=http://1.1.1.2:2380,etcd-3=http://1.1.1.3:2380"
ETCD_INITIAL_CLUSTER_TOKEN="etcd-cluster"
ETCD_INITIAL_CLUSTER_STATE="new"
EOF

上述etcd.conf配置信息说明

ETCD_NAME：节点名称，集群中唯一
ETCD_DATA_DIR：数据目录
ETCD_LISTEN_PEER_URLS：集群通信监听地址
ETCD_LISTEN_CLIENT_URLS：客户端访问监听地址
ETCD_INITIAL_ADVERTISE_PEER_URLS：集群通告地址
ETCD_ADVERTISE_CLIENT_URLS：客户端通告地址
ETCD_INITIAL_CLUSTER：集群节点地址
ETCD_INITIAL_CLUSTER_TOKEN：集群Token
ETCD_INITIAL_CLUSTER_STATE：加入集群的当前状态，new是新集群，existing表示加入已有集群

etcd1、etcd2、etcd3三台机器上分别执行脚本

cat > /etc/systemd/system/etcd.service <<"EOF"
[Unit]
Description=Etcd Server
After=network.target
After=network-online.target
Wants=network-online.target

[Service]
Type=notify
EnvironmentFile=-/data/service/etcd/conf/etcd.conf
WorkingDirectory=/data/service/etcd/
ExecStart=/data/service/etcd/bin/etcd \
  --log-outputs=/data/service/etcd/log/etcd.log \
  --log-level=info
Restart=on-failure
RestartSec=5
LimitNOFILE=65536

[Install]
WantedBy=multi-user.target
EOF

参数说明：

–log-outputs表示日志路径

EnvironmentFile表示配置文件路径

4、启动etcd集群

4.1 执行相关启动命令

重新加载服务，三台机器分别执行

systemctl daemon-reload

启动etcd服务命令，三台机器分别执行

#启动服务，先启动的服务会卡主一下，等待其他服务启动
systemctl start etcd

启动成功后设置开机自启，三台机器分别执行

systemctl enable etcd

4.2 检查etcd服务是否正常运行：

systemctl status etcd

如果etcd服务正常运行，应该输出类似以下的信息：：active (running)

● etcd.service - Etcd Server
   Loaded: loaded (/etc/systemd/system/etcd.service; disabled; vendor preset: disabled)
   Active: active (running) since Tue 2024-01-16 13:52:14 CST; 36s ago
 Main PID: 8850 (etcd)
   CGroup: /system.slice/etcd.service
           └─8850 /data/service/etcd/bin/etcd --log-outputs=/data/service/etcd/log/etcd...

Jan 16 13:51:23 ctos-etcd-dev-01 etcd[8850]: {"level":"info","ts":"2024-01-16T13:51:2..."}
Jan 16 13:52:14 ctos-etcd-dev-01 systemd[1]: Started Etcd Server.

4.3 集群状态查询

/data/service/etcd/bin/etcdctl -w table endpoint status --endpoints="http://1.1.1.1:2379,http://1.1.1.2:2379,http://1.1.1.3:2379" member list
ENDPOINTIDVERSIONDB SIZEIS LEADERIS LEARNERRAFT TERMRAFT INDEXRAFT APPLIED INDEXERRORS
http://1.1.1.1:23797**************63.5.1120 kBtruefalse25959
http://1.1.1.2:23799**************e3.5.1120 kBfalsefalse25959
http://1.1.1.3:2379e**************03.5.1120 kBfalsefalse25959

etcdctl的常用子命令

三、开启身份验证

密码统一为aaa123(虚拟密码)

权限相关的命令

  1. 查看认证状态
/data/service/etcd/bin/etcdctl  --endpoints="http://1.1.1.1:2379,http://1.1.1.2:2379,http://1.1.1.3:2379" auth status

默认为false

  1. 开启认证

2.1 创建root用户（执行后输出密码，确认密码）

/data/service/etcd/bin/etcdctl  --endpoints="http://1.1.1.1:2379,http://1.1.1.2:2379,http://1.1.1.3:2379" user add root

2.2 给root用户并赋予root角色

注意：etcd默认存在一个root权限 可以操作任意数据

/data/service/etcd/bin/etcdctl  --endpoints="http://1.1.1.1:2379,http://1.1.1.2:2379,http://1.1.1.3:2379" user grant-role root root

2.3 开启身份认证

#开启认证
/data/service/etcd/bin/etcdctl --endpoints="http://1.1.1.1:2379,http://1.1.1.2:2379,http://1.1.1.3:2379" auth enable
#使用账号密码查询身份认证状态
/data/service/etcd/bin/etcdctl --user=root --password='aaa123' --endpoints="http://1.1.1.1:2379,http://1.1.1.2:2379,http://1.1.1.3:2379" auth status

四、创建新用户供其他模块使用

例如创建对/apisix开头的key具有读写权限的用户（测试用户名guyougao 角色为devops），模版如下：

  1. 创建一个devops角色
/data/service/etcd/bin/etcdctl --user=root --password='aaa123' --endpoints="http://1.1.1.1:2379,http://1.1.1.2:2379,http://1.1.1.3:2379" role add devops
  1. 让devops角色对/dev开头的key有读写权限
/data/service/etcd/bin/etcdctl --user=root --password='aaa123' --endpoints="http://1.1.1.1:2379,http://1.1.1.2:2379,http://1.1.1.3:2379" role grant-permission devops  readwrite /dev --prefix=true

其他相关授权命令

需求命令
对 k1 ~ k100 有读写权限 [k1 k100)grant-permission devops readwrite k1 k100
对/test开头的key只有查询权限grant-permission devops read /test --prefix=true
对/ops开头的key只有写权限grant-permission devops write /ops
  1. 创建guyougao用户（执行后输出密码，确认密码）
/data/service/etcd/bin/etcdctl --user=root --password='aaa123' --endpoints="http://1.1.1.1:2379,http://1.1.1.2:2379,http://1.1.1.3:2379" user add guyougao
  1. 给guyougao用户赋予devops角色
/data/service/etcd/bin/etcdctl --user=root --password='aaa123' --endpoints="http://1.1.1.1:2379,http://1.1.1.2:2379,http://1.1.1.3:2379" user grant-role guyougao devops
  1. 使用新创建的用户对/dev开头的key进行相关验证
#增加数据
/data/service/etcd/bin/etcdctl --user=guyougao --password='aaa123' --endpoints="http://1.1.1.1:2379,http://1.1.1.2:2379,http://1.1.1.3:2379" put /dev/success success 
#查询数据
/data/service/etcd/bin/etcdctl --user=guyougao --password='aaa123' --endpoints="http://1.1.1.1:2379,http://1.1.1.2:2379,http://1.1.1.3:2379" get /dev/success
 #返回结果表示完成

五、ETCD常用命令

etcdctl的 常用子命令

version: 查看版本
member list: 查看节点状态，learner 情况
endpoint status: 节点状态，leader 情况
endpoint health: 健康状态与耗时
alarm list: 查看警告，如存储满时会切换为只读，产生 alarm
alarm disarm：清除所有警告
set app demo: 写入
get app: 获取
update app demo1:更新
rm app: 删除
mkdir demo 创建文件夹
rmdir dir 删除文件夹
backup 备份
compaction： 压缩
defrag：整理碎片
watch key 监测 key 变化
get / –prefix –keys-only: 查看所有 key


权限相关的命令

role add 创建角色
role delete 删除角色
role get 查看角色
role grant-permission 配置角色权限
role list 查询所有角色
role revoke-permission 撤销角色权限
guyougao
关注
  • 33
    点赞
  • 踩
  • 55
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
k8s 二进制安装 etcd 3.5.1
03-21
k8s 二进制安装 etcd 3.5.1
2024年力扣热门100题之字母异位词分组【中等】(1)，2024年最新微信小程序页面跳转方法总结
2401_84910943的博客
05-11 417
输入: strs = [“eat”, “tea”, “tan”, “ate”, “nat”, “bat”]输出: [[“bat”],[“nat”,“tan”],[“ate”,“eat”,“tea”]]解法1：字符串拆分后排序，再聚合，最后再使用哈希归类。输入: strs = [“a”]解法2：求字符串权值，按权值分类。输入: strs = [“”]strs[i] 仅包含小写字母。输出: [[“a”]]输出: [[“”]]
ETCD 部署并启用证书认证
追梦者的部落格
06-29 4464
证书生成 证书生成的方式非常多，同类的文档也很容易找到，这里推荐此篇文章：https://coreos.com/os/docs/latest/generate-self-signed-certificates.html，但是由于etcd的特殊性，server端配置的证书，也会被用于去进行客户端认证，因此需要在 server 的 usages 里面加上：client auth选项，否则会出现此种问题：certificate specifies an incompatible key usage 下面是完整的c
2024年Go最新Etcd教程 — Etcd单机版安装_etcd单机部署(1)，2024年最新字节跳动面试官
2401_84911322的博客
05-14 469
目录下，这样就可以在系统中直接调用etcd/etcdctl这两个程序了。，即可启动一个单节点的etcd服务，，可以使用，但是本机只能访问本机的。开放：2379、2380端口。的，所以本文重点解决的就是。这两个二进制文件复制到。，其他电脑是无法使用该机。
etcd开启身份验证
fusugongzi的博客
04-25 1734
etcd有两种身份验证方式：1. 用户名密码2. 证书这里采用用户名密码的验证方式以下命令使用的etcd版本是3.5.0。
etcd的基本操作
在我的博客中，你将看到我对生活的热爱，对知识的渴望，以及对创新的追求。我会分享我在各个领域的思考和发现，我的目标是创造一个充满活力、启迪心灵的交流平台，让每一个访问者都能从中获得新的观点和启示。
08-09 135
etcd用为kubenretes的数据库，是一个k/v系统，用于存储kubernetes当中的所有的数据。* etcdctl： 客户端命令。* etcd： 服务端进程。
一起学习ETCD系列——运维操作之etcdctl使用
weixin_38597669的博客
01-27 1814
本文总结了etcdctl的各种命令的使用，比如基本操作、分布式锁、集群管理等
K8s组件：etcd安装、使用及原理（Linux）
weixin_45565886的博客
06-29 4098
K8s组件：etcd安装、使用及原理（Linux）
etcd 集群部署包 TLS.tar.gz
06-29
5. **设置客户端认证**：如果需要客户端验证，还需为每个客户端生成证书，并在etcd配置中设置`--client-cert-auth`和`--client-ca-file`。 6. **启动etcd**：启动etcd实例，它们将使用TLS进行安全通信。 **etcd集群...
Docker搭建etcd集群
01-27
etcd是CoreOS团队发起的一个开源项目（Go语言，其实很多这类项目都是Go语言实现的，只能说很强大），实现了分布式键值存储和服务发现，etcd 和ZooKeeper/Consul非常相似，都提供了类似的功能，以及RESTAPI的访问操作...
kubernetes部署etcd集群
01-20
etcd是一个高可用的键值存储系统，kubernetes使用它来存储各个资源的状态，从而实现了Restful的API。 服务器IP/主机名 用途 192.168.122.134/k8s-master1 etcd、kube-apiserver、kube-controller-manager、...
Etcd3静态集群部署
03-19
另外etcd注重于应用配置数据的保存，确保数据在多个节点上的高度一致性，并在集群半数以下成员节点出现故障时，能够保持正常运转。与其他数据库和缓存服务不同的是，用于配置管理的etcd服务会运行在集群每一个节点上...
etcd3.5.1-clientv3部署实践
tianwaimmmm的博客
12-29 1156
etcd3.5.1-clientv3部署实战 1.基本介绍 前文介绍过etcd的下载和部署，etcd提供了简单的可执行程序包，没有什么依赖，运行部署非常简便。本文进行深一步的介绍，讲解如何使用etcd自带的clientv3连接服务端并使用，以及C++的相关调用。 本次选用etcd的最新版本3.5.1（2021年10月15日发布），etcd3.5版本更新内容的介绍可参考这篇文章： 一篇文章带你搞懂 etcd 3.5 的核心特性 在etcd3.5版本中，重大的改动如下： 首先，在我看来，在etcd 3.5版本，
etcd v3开启认证完整步骤
空山新雨后，天气晚来秋
01-03 627
etcd v3开启认证完整流程
Etcd 快速搭建一个 etcd 集群的两个方法
sql server的专栏
02-08 2755
最近一直在学习ETCD，搭建一个快速的学习环境是最重要的，官方给了一些搭建的方法，通过git 的方式。这边没有采用，还是使用传统的老的方法。下载已经编译好的文件，直接放到3台虚拟机中的LI...
2024年全国职业技能大赛“网络安全赛项”国赛 模块B 任务解析（超详细）_2024年全国职业院校技能大赛高职组“网络空间安全(1)
2401_84247559的博客
04-26 513
最近遍览了各种网络安全类的文章，内容参差不齐，其中不伐有大佬倾力教学，也有各种不良机构浑水摸鱼，在收到几条私信，发现大家对一套完整的系统的网络安全从学习路线到学习资料，甚至是工具有着不小的需求。相比起繁琐的文字，还是生动的视频教程更加适合零基础的同学们学习，这里也是整理了一份与上述学习路线一一对应的网络安全视频教程。当然，当你入门之后，仅仅是视频教程已经不能满足你的需求了，你肯定需要学习各种工具的使用以及大量的实战项目，这里也分享一份。，毕竟实战是检验真理的唯一标准嘛~最后就是项目实战，这里带来的是。
ansible离线部署etcd二进制集群
流月up的博客
05-10 717
功能如下： - ansible 2.9版本离线安装 - centos 7 内核离线升级 - cfssl 离线二进制安装 - etcd 3.5.13版本 二进制离线安装
2024年最全Etcd教程 — 第二章 Etcd集群静态发现_etcd 双节点集群(2)，Golang这些高端技术只有你还不知道
2401_84910977的博客
05-14 754
}1.etcd-version：etcd的版本。2.git-sha。3.go-version：基于的go语言版本。4.go-os：运行的系统。5.go-arch：运行的系统架构。6.max-cpu-set：设置的CPU数量。7.max-cpu-available：最多可用的CPU数量。8.member-initialized：集群成员是否初始化，默认false。
Go最新Etcd教程 — Etcd单机版安装_etcd单机部署(4)，掌握这些Golang开发热门前沿知识
最新发布
2401_84925558的博客
05-16 359
目录下，这样就可以在系统中直接调用etcd/etcdctl这两个程序了。目录下保存的数据，不然再重新启用服务会失败。，即可启动一个单节点的etcd服务，开放：2379、2380端口。这两个二进制文件复制到。
在centos中etcd集群部署
05-29
好的，下面是在 CentOS 中部署 etcd 集群的步骤： 1. 下载 etcd 安装包 可以从 etcd 官网下载最新版的 etcd 安装包，下载地址为：https://github.com/etcd-io/etcd/releases 2. 解压安装包 将下载的 etcd 安装包解压到指定目录，比如 /usr/local/etcd ``` tar -zxvf etcd-v3.4.13-linux-amd64.tar.gz -C /usr/local/etcd --strip-components=1 ``` 3. 创建 etcd 配置文件 在每个节点上创建 etcd 配置文件，比如 /etc/etcd.conf，配置内容如下： ``` name=node1 # 节点名称，每个节点名称不同 data-dir=/var/lib/etcd # 数据存储目录 initial-cluster=node1=http://192.168.1.1:2380,node2=http://192.168.1.2:2380,node3=http://192.168.1.3:2380 # 集群中所有节点的地址和端口号 initial-advertise-peer-urls=http://192.168.1.1:2380 # 当前节点的地址和端口号 listen-peer-urls=http://192.168.1.1:2380 # 监听地址和端口号 listen-client-urls=http://192.168.1.1:2379,http://127.0.0.1:2379 # 监听客户端连接的地址和端口号，可以指定多个 advertise-client-urls=http://192.168.1.1:2379 # 当前节点对外提供服务的地址和端口号 initial-cluster-state=new # 集群状态，new 表示新建集群 ``` 其中，initial-cluster 中的节点名称和地址需要根据实际情况修改。 4. 启动 etcd 集群 在每个节点上启动 etcd 服务： ``` /usr/local/etcd/etcd --config-file /etc/etcd.conf ``` 5. 验证 etcd 集群 使用 etcdctl 工具验证 etcd 集群是否正常运行： ``` export ETCDCTL_API=3 etcdctl --endpoints=http://192.168.1.1:2379,http://192.168.1.2:2379,http://192.168.1.3:2379 member list ``` 如果返回了所有节点的信息，则说明 etcd 集群已经成功启动。 以上是在 CentOS 中部署 etcd 集群的步骤，希望能对你有所帮助。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值