k8s之etcd集群部署篇（k8s篇一）

最新推荐文章于 2024-05-26 09:03:06 发布
最新推荐文章于 2024-05-26 09:03:06 发布
阅读量6.4k 收藏 22
点赞数 1
分类专栏： Linux k8s etcd 文章标签： k8s etcd
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/lilin0800/article/details/88748036
版权
Linux 同时被 3 个专栏收录
8 篇文章 0 订阅
订阅专栏
k8s
6 篇文章 0 订阅
订阅专栏
etcd
1 篇文章 0 订阅
订阅专栏

文章目录

概述

  • 什么是etcd？

官方文档是这么解释的：
etcd是一个分布式键值存储，旨在可靠，快速地保存和提供对关键数据的访问。它通过分布式锁定，领导者选举和写入障碍实现可靠的分布式协调。etcd集群旨在实现高可用性和永久数据存储和检索。

  • etcd在k8s中担当的什么角色？

Etcd是Kubernetes集群中的一个十分重要的组件，用于保存集群所有的网络配置和对象的状态信息。整个kubernetes系统中一共有两个部分需要用到etcd用来协同和存储配置，分别是：

  • 网络插件flannel、对于其它网络插件也需要用到etcd存储网络的配置信息
  • kubernetes本身，包括各种对象的状态和元信息配置
  • 个人观点

说的通俗点其实etcd就是在k8s集群中的各个地方都有使用，存储了各个组件的信息，各个节点的信息，当你运行镜像时也有使用。

准备工作

硬件环境

准备三个节点，分别为node1，node2，node3。系统为centos7（当然你也可以使用其他linux系统）

  • 部署说明：
主机名主机ip内存cpu容量
node9192.168.1.2502G2C20G
node10192.168.1.2512G2C20G
node11192.168.1.2522G2C20G
网络环境
  1. 设置关闭防火墙及SELINUX
#关闭防火墙
[root@localhost ~]# systemctl stop firewalld 
#关闭开机自启
[root@localhost ~]# systemctl disable firewalld
Removed symlink /etc/systemd/system/multi-user.target.wants/firewalld.service.
Removed symlink /etc/systemd/system/dbus-org.fedoraproject.FirewallD1.service.
#关闭SELINUX
[root@localhost ~]# setenforce 0
#修改配置文件进行永久关闭
[root@localhost ~]# vi /etc/selinux/config

在这里插入图片描述
2. 关闭Swap

#关闭swap分区
[root@localhost ~]# swapoff -a
#注释掉swap分区部分
[root@localhost ~]# vi /etc/fstab

注释掉

软件准备
  1. 下载k8s所需组件二进制文件

链接: https://pan.baidu.com/s/1PU-iBCFP6o1mH7N9DFgI5g 提取码: y3dg

  1. 下载ssl证书工具
# 创建存储证书工具目录
mkdir sslTools
cd sslTools
# 下载证书工具
wget https://pkg.cfssl.org/R1.2/cfssl_linux-amd64
wget https://pkg.cfssl.org/R1.2/cfssljson_linux-amd64
wget https://pkg.cfssl.org/R1.2/cfssl-certinfo_linux-amd64
# 给予权限
chmod +x cfssl_linux-amd64 cfssljson_linux-amd64 cfssl-certinfo_linux-amd64
# 移动到已有的path路径下
mv cfssl_linux-amd64 /usr/local/bin/cfssl
mv cfssljson_linux-amd64 /usr/local/bin/cfssljson
mv cfssl-certinfo_linux-amd64 /usr/bin/cfssl-certinfo
  1. 下载并安装配置docker
#配置docker所需的网络环境
cat << EOF | tee /etc/sysctl.d/k8s.conf
net.ipv4.ip_forward = 1
net.bridge.bridge-nf-call-ip6tables = 1
net.bridge.bridge-nf-call-iptables = 1
EOF
#重置
sysctl -p /etc/sysctl.d/k8s.conf

注意：
若执行重置时失败，出现：
  sysctl: cannot stat /proc/sys/net/bridge/bridge-nf-call-ip6tables: No such file or directory
  sysctl: cannot stat /proc/sys/net/bridge/bridge-nf-call-iptables: No such file or directory
解决方法：
 先执行：modprobe br_netfilter

#配置docker
yum-config-manager --add-repo https://download.docker.com/linux/centos/docker-ce.repo
# 查看docker列表
yum list docker-ce --showduplicates | sort -r
#安装最新版本docker
yum install docker-ce -y
#设置开机自启并启动docker
systemctl start docker && systemctl enable docker

安装完毕输入：docker -info 能考到docker和系统信息
在这里插入图片描述



etcd部署

tar -zxvf etcd-v3.3.10-linux-amd64.tar.gz 
cd etcd-v3.3.10-linux-amd64/
mkdir /k8s/etcd/{bin,ssl,config} -p
mkdir /home/sslTools/ssl
cp etcd etcdctl /k8s/etcd/bin/
创建 ETCD 证书
cd /home/sslTools/ssl
cat << EOF | tee ca-config.json
{
  "signing": {
    "default": {
      "expiry": "87600h"
    },
    "profiles": {
      "k8s": {
         "expiry": "87600h",
         "usages": [
            "signing",
            "key encipherment",
            "server auth",
            "client auth"
        ]
      }
    }
  }
}
EOF

创建 ETCD CA 配置文件

cat << EOF | tee etcd-ca-csr.json
{
    "CN": "etcd CA",
    "key": {
        "algo": "rsa",
        "size": 2048
    },
    "names": [
        {
            "C": "CN",
            "L": "beijing",
            "ST": "beijing"
        }
    ]
}
EOF

创建 ETCD Server 证书

cat << EOF | tee etcd-server-csr.json
{
    "CN": "etcd",
    "hosts": [
    "192.168.1.250",
    "192.168.1.251",
    "192.168.1.252"
    ],
    "key": {
        "algo": "rsa",
        "size": 2048
    },
    "names": [
        {
            "C": "CN",
            "L": "beijing",
            "ST": "beijing"
        }
    ]
}
EOF
#生成etcd证书
cfssl gencert -initca etcd-ca-csr.json | cfssljson -bare ca -
cfssl gencert -ca=ca.pem -ca-key=ca-key.pem -config=ca-config.json -profile=k8s etcd-server-csr.json | cfssljson -bare server

复制 *.pem 证书到我们k8s文件夹中：

cp *pem /k8s/etcd/ssl
etcd信息配置
  • 创建etcd配置文件
vi /k8s/etcd/config/etcd
#[Member]
ETCD_NAME="etcd01"
ETCD_DATA_DIR="/var/lib/etcd/default.etcd"
ETCD_LISTEN_PEER_URLS="http://192.168.1.250:2380"
ETCD_LISTEN_CLIENT_URLS="http://192.168.1.250:2379"

#[Clustering]
ETCD_INITIAL_ADVERTISE_PEER_URLS="http://192.168.1.250:2380"
ETCD_ADVERTISE_CLIENT_URLS="http://192.168.1.250:2379"
ETCD_INITIAL_CLUSTER="etcd01=http://192.168.1.250:2380"
ETCD_INITIAL_CLUSTER_TOKEN="etcd-cluster"
ETCD_INITIAL_CLUSTER_STATE="new"
  • 修改etcd.service文件
vi  /usr/lib/systemd/system/etcd.service 

[Unit]
Description=Etcd Server
After=network.target
After=network-online.target
Wants=network-online.target

[Service]
Type=notify
EnvironmentFile=/k8s/etcd/config/etcd
ExecStart=/k8s/etcd/bin/etcd \
--name=${ETCD_NAME} \
--data-dir=${ETCD_DATA_DIR} \
--listen-peer-urls=${ETCD_LISTEN_PEER_URLS} \
#127.0.0.1:2379 一 定 要 加 上！！
--listen-client-urls=${ETCD_LISTEN_CLIENT_URLS},http://127.0.0.1:2379 \
--advertise-client-urls=${ETCD_ADVERTISE_CLIENT_URLS} \
--initial-advertise-peer-urls=${ETCD_INITIAL_ADVERTISE_PEER_URLS} \
--initial-cluster=${ETCD_INITIAL_CLUSTER} \
--initial-cluster-token=${ETCD_INITIAL_CLUSTER_TOKEN} \
--initial-cluster-state=new \
--cert-file=/k8s/etcd/ssl/server.pem \
--key-file=/k8s/etcd/ssl/server-key.pem \
--peer-cert-file=/k8s/etcd/ssl/server.pem \
--peer-key-file=/k8s/etcd/ssl/server-key.pem \
--trusted-ca-file=/k8s/etcd/ssl/ca.pem \
--peer-trusted-ca-file=/k8s/etcd/ssl/ca.pem
Restart=on-failure
LimitNOFILE=65536

[Install]
WantedBy=multi-user.target

启动测试下

systemctl daemon-reload
systemctl start etcd
systemctl status etcd

当看到如下图说明启动成功。
在这里插入图片描述

搭建集群

经过上面步骤我们已经配置好了一个etcd单机运行，我们只需要把已经运行的机器的全部配置发到其他节点上就可以了。

配置ssh认证
 ssh-keygen

一路下一步
在这里插入图片描述
然后将ssh的key发给其他节点

ssh-copy-id 192.168.1.252
ssh-copy-id 192.168.1.251

按照提示输入yes和其他节点的密码

修改节点配置

我们先将配置发送给其他节点信息修改接收节点中的配置文件

cd /k8s/ 
scp -r etcd 192.168.1.252:/k8s/
scp -r etcd 192.168.1.251:/k8s/
scp /usr/lib/systemd/system/etcd.service  192.168.1.252:/usr/lib/systemd/system/etcd.service
scp /usr/lib/systemd/system/etcd.service  192.168.1.251:/usr/lib/systemd/system/etcd.service

首先修改这两个节点配置文件中的本机ip和etcd-name
在这里插入图片描述
然后我们需要修改三个节点的配置文件中 ETCD_INITIAL_CLUSTER的部分

修改为：
ETCD_INITIAL_CLUSTER=“etcd01=http://192.168.1.250:2380,etcd02=http://192.168.1.251:2380,etcd03=http://192.168.1.252:2380”
请注意http一定要写，名字和IP一定要对应，将三个节点的配置文件都按照自己实际情况改为该模式

然后三个节点重新启动

systemctl daemon-reload
systemctl enable etcd
systemctl restart etcd

查看集群健康状态

 cd /k8s/etcd/bin/
./etcdctl \
--ca-file=/k8s/etcd/ssl/ca.pem \
--cert-file=/k8s/etcd/ssl/server.pem \
--key-file=/k8s/etcd/ssl/server-key.pem \
--endpoints="http://192.168.1.250:2379,http://192.168.1.251:2379,http://192.168.1.252:2379" \
 cluster-health

显示以下说明搭建成功
在这里插入图片描述

错误请参考

  • 当我们启动集群时发现其中某一节点状态出现错误，如下图
    在这里插入图片描述
    该错误是我们的etcd启动多次造成，只需要将配置文件中 ETCD_DATA_DIR指向的路径删除重启即可，以该案例为例
    在这里插入图片描述

感谢k8s中文社区中 https://www.kubernetes.org.cn/4963.html 文章提供的信息帮助

开发者_cn
关注
  • 1
    点赞
  • 踩
  • 22
    收藏
    觉得还不错? 一键收藏
  • 4
    评论
专栏目录
二进制安装K8S--etcd
hao839422的专栏
10-28 1450
二进制安装K8s 学习笔记
rancher+k8s+etcd集群
08-18
使用RKE构建企业生产Kubernetes集群 内容包含： 1.集群主机准备 2.daocker部署 3.docker compose安装 4.添加rancher用户 5.生成ssh证书用户部署集群 6.rke工具下载 7.初始化rke配置文件 ....
k8s 部署etcd集群
邢宁
12-06 5703
前言 公司计划使用etcd来做统一配置管理，由于服务都在阿里云托管k8s集群上，所以这里也打算使用k8s来部署etcd集群。 一、创建持久化存储 1、创建etcd目录 mkdir etcd/ mkdir etcd/nas 2、创建storageclass存储 （1）设置rbac cd /data/etcd/nas cat rbac.yaml kind: ClusterRole apiVersion: rbac.authorization.k8s.io/v1 metadata: name: nfs-
【K8S系列】深入解析etcd
热门推荐
颜淡慕潇
04-17 3万+
etcd是一个分布式、高可用性的键值存储系统，由CoreOS开发并开源。它使用Raft算法来保证其高可用性和一致性，并可以在集群中的多个节点上部署。每个etcd节点都包含完整的数据副本，并与其他节点进行复制和同步，以确保数据的一致性和可用性。 在Kubernetes中，etcd存储了所有的Kubernetes对象（如Pod、Service、Deployment等）以及集群的状态信息。Kubernetes的各个组件（如API Server、Controller Manager、Scheduler等）
etcd集群部署
最新发布
wyl9527的博客
05-26 1031
etcd是一个Go语言编写的分布式、高可用的一致性键值存储系统,用于提供可靠的分布式键值(keyvalue)存储、配置共享和服务发现等功能。etcd官网文档地址。
k8s集群部署方案_使用Statefulset在k8s集群中部署etcd集群
weixin_39960793的博客
12-03 503
前言我通过自己构建dockerfile定制自己的镜像。按照我的步骤，前期将启动脚本和etcd所需配置导入镜像中，这样一来后期部署的yaml只需要打入几个环境变量即可，这样将非常简洁方便！所需脚本和所有内容都将在我的GitHub中找到：https://github.com/xll-forever/k8s-etcd​github.com当然，etcd安装包可以去官网下载压缩包，解压后与Dockerfi...
6.k8s主控节点-部署etcd
sirius
05-25 377
supervisor cfssl etcd k8s主控节点-部署etcd 一、准备集群证书 （证书环境参考4.证书环境章节） 准备ca-config.json 技巧：cfssl print-defaults config能够打印配置文件模板作参考 vi /etc/certs/ca-config.json { "signing": { "default": { "expiry": "175200h" }, "profiles".
K8s集群所有细节部署文档
03-17
K8s集群所有细节部署文档 内容简介： 1、组件版本和配置策略 2、系统初始化和全局变量 3、创建CA证书和密钥 4、部署kubectl命令行工具 5、部署etcd集群 6、部署flannel网络 7、部署master节点 8、部署woker节点 9、...
kubeadm初始化高可用k8s1.20.4集群-etcd集群独立在k8s集群外详细笔记资料包
06-27
Kubernetes，简称K8s，是目前最流行的容器编排系统，用于自动化容器化的应用程序部署、扩展和管理。kubeadm是Kubernetes提供的一种轻量级工具，用于简化集群的初始化和升级过程。本资料包重点讲解如何使用kubeadm来...
K8s集群部署配置文件包
10-27
本压缩包“K8s集群部署配置文件包”提供了全面的资源，帮助用户快速构建并配置Kubernetes集群。以下将详细阐述其中涉及的关键知识点。 首先，ETCD是Kubernetes集群的核心组件，它是轻量级、分布式的键值存储系统，...
k8s安装需要的组件：cfssl+dns+docker18.06+etcd+flannel+helm+socat
11-18
【离线安装包】 本人已经搭建过一套环境了，由于工作环境隔离外网，只能离线安装，现将需要用到的工具均打包好，以备不时之需。
k8s.gcr.io/etcd:3.4.3-0镜像包
03-06
kubernetes的k8s.gcr.io/etcd:3.4.3-0镜像包，版本为v1.17.3。文件是etcd_3_4_3-0.zip,使用方法先解压之后得到tar包，可以直接导入docker容器
kubernetes集群+etcd单实例部署k8s管理系统
jiang0615csdn的博客
05-27 133
Kubernetes集群+etcd单实例部署k8s管理系统 文章目录 一、 Kubernetes 和相关组件介绍 1.Kubernetes 概述 Kubernetes 是 Google 开源的容器集群管理系统，基于 Docker 构建一个容器的调度服务，提供资源调度、均衡容灾、服务注册、动态扩缩容等功能套件。基于容器的云平台。官网：https://kubernetes.io/ 2.Kubernetes 架构设计图 3.Kubernetes 常见组件介绍 ma...
k8s的核心组件etcd的安装使用、快照说明及etcd命令详解【含单节点，多节点和新节点加入说明】
崔崇鑫的博客，你linux/云运维工作中的百科全书。
08-16 681
文章目录说明基本查看相关命令版本查看查看etcd暴露出来的prometheus指标；节点健康状态查看现有节点成员查看添加一个节点成员删除一个节点成员备份etcd的整个数据目录快照备份通过快照恢复etcd集群【每个节点都要执行】etcd单节点命令的使用【增删改查】etcd单节点的安装配置安装etcd包配置文件编辑服务加入开机启动获取帮助版本2查看所有命令如：创建、查看、删除其他节点访问该etcd版本3查看所有命令如：创建、查看、删除其他节点访问该etcd取消版本定义【恢复默认】多节点配置配置主节点【主节点le
K8S核心组件etcd详解（上）
singless的博客
08-17 2267
k8s中所有对象的manifest都需要保存到某个地方，这样他们的manifest在api server重启和失败的时候才不会丢失，因此引入了etcd。在k8s中只有api server和etcd直接交互，其它组件都通过api server间接和etcd交互，这样做的好处如下。增强乐观锁系统及验证系统的健壮性方便后续存储的替换，只需修改api server组件的相关接口。etcd是一个响应快、分布式、一致的KV存储，也是k8s存储集群状态和元数据的唯一地方。
k8s学习-Etcd集群构建
ethenoscar2011的博客
09-03 264
Etcd是一个的 键值存储系统，由CoreOS开发和维护。Etcd使用Raft算法实现分布式一致性，提供了的数据存储服务。Etcd可以被用于存储和检索键值对数据，支持事务和版本控制，并具有分布式一致性和高可用性等特性。Etcd还提供了和gRPC API，方便用户进行访问和使用。在Kubernetes中，Etcd被用作数据存储，用于存储集群的元数据和状态信息，包括PodServiceConfigMapSecret等对象的元数据和状态，以及节点的状态和配置信息等。
k8s部署之ETCD集群
工作中的点点滴滴
05-12 6633
k8s部署之ETCD集群 1.etcd下载 etcd下载地址：https://github.com/coreos/etcd/releases 从github etcd的发布页面选取相应的版本用 wget url 来下载 如： wget https://github.com/coreos/etcd/releases/download/v3.3.5/etcd-v3.3.5-linux-amd6...
k8s部署etcd集群
weixin_33935505的博客
05-05 337
1、k8s部署高可用etcd集群时遇到了一些麻烦，这个是自己其中一个etcd的配置文件 例如： [Unit] Description=Etcd Server After=network.target After=network-online.target Wants=network-online.target Documentation=https://github.com/co...
云平台K8s1
08-04
2.1 etcd 安装（https://github.com/coreos/etcd/releases） 2.2 创建 etcd 证书 2.3 生成 etcd

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 4
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值