RKE2在线方式部署K8S集群最新版本

已于 2024-03-19 15:54:44 修改
阅读量1.1k 收藏 9
点赞数 26
分类专栏： K8S高可用集群 linux 文章标签： kubernetes 容器 云原生
于 2024-03-19 15:53:45 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/moyanfengyun/article/details/136845368
版权

1. 主机环境准备

本次部署使用3台centos7主机进行，具体配置如下

主机名IP地址系统内核参数配置信息
k8s-rke2-server01192.168.141.200CentOS 7.9 x645.4.269-1.el7.elrepo.x86_644核8G
k8s-rke2-server02192.168.141.201CentOS 7.9 x645.4.269-1.el7.elrepo.x86_644核8G
k8s-rke2-server03192.168.141.202CentOS 7.9 x645.4.269-1.el7.elrepo.x86_644核8G

主机配置主要进行下面的设置：

  1. 主机名修改，dns设置，磁盘格式化，LVM分区
  2. 安装常用软件包
  3. 系统参数常见优化
  4. 安全设置：关闭selinux，设置iptables规则或者先关闭firewalld服务
  5. 网络优化与防火墙设置

1.1 主机初始化

磁盘格式化，LVM分区，这些就不再写了。有大量的参考文档。

主机名修改，配置hosts

hostnamectl set-hostname k8s-rke2-server01

cat >> /etc/hosts << EOF
192.168.141.200 k8s-rke2-server01
192.168.141.201 k8s-rke2-server02
192.168.141.202 k8s-rke2-server03
EOF

2. 关闭swap分区

swapoff -a

修改/etc/fstab配置文件，把swap分区挂载的那一行注释掉

1.2 NetworkManager设置

注意：如果使用NetworkManager管理网络，需要进行如下配置

参考：https://docs.rancher.cn/docs/rke2/known_issues/_index/#networkmanager

systemctl status NetworkManager
cat >> /etc/NetworkManager/conf.d/rke2-canal.conf << EOF
[keyfile]
unmanaged-devices=interface-name:cali*;interface-name:flannel*
EOF

systemctl daemon-reload
systemctl restart NetworkManager

2.5 防火墙规则

1. 关闭firewalld服务

参考：https://docs.rancher.cn/docs/rke2/known_issues/_index/#networkmanager

systemctl stop firewalld
systemctl disable firewalld
systemctl disable iptables
systemctl stop iptables

关闭firewalld服务之后，如果还想用防火墙规则，可以试试csf或者iptables进行规则管理。

2. 关闭selinux

getenforce
setenforce 0
sed -i 's/SELINUX=enforcing/SELINUX=disabled/g' /etc/selinux/config
getenforce

详细的安装要求，请参考：
https://docs.rancher.cn/docs/rke2/install/requirements/_index/

1.3 设置时间同步

安装ntp相关服务

yum -y install ntp
systemctl start ntpd  # 启动时钟同步服务
systemctl enable  ntpd # 设置开机启动
ntpq -p # 查看时钟同步状态

如果在局域网环境中有ntp时钟服务器，尽量用本地的

1.4 ipvs配置

由于ipvs已经加入到了内核的主干，所以为kube-proxy开启ipvs的前提需要加载以下的内核模块：
在所有的Kubernetes节点执行以下脚本:

cat > /etc/sysconfig/modules/ipvs.modules <<EOF
#!/bin/bash
modprobe -- ip_vs
modprobe -- ip_vs_rr
modprobe -- ip_vs_wrr
modprobe -- ip_vs_sh
modprobe -- nf_conntrack_ipv4
EOF

#执行脚本
chmod 755 /etc/sysconfig/modules/ipvs.modules 
bash /etc/sysconfig/modules/ipvs.modules 
lsmod | grep -e ip_vs -e nf_conntrack_ipv4

上面脚本创建了/etc/sysconfig/modules/ipvs.modules文件，保证在节点重启后能自动加载所需模块。 使用

lsmod | grep -e ip_vs -e nf_conntrack_ipv4

命令查看是否已经正确加载所需的内核模块。
接下来还需要确保各个节点上已经安装了ipset软件包。 为了便于查看ipvs的代理规则，最好安装一下管理工具ipvsadm。

yum install ipset ipvsadm -y

以上设置完成后，重启主机，确认所有配置都已经生效。

2. RKE2安装配置

设置一个 HA 集群需要以下步骤：

  1. 配置一个固定的注册地址
  2. 启动第一个 server 节点
  3. 加入其他 server 节点

参考：https://docs.rancher.cn/docs/rke2/install/ha/_index/

由于主机有限，我们就把第一个启动的节点设置为注册地址，下面只进行2、3步骤。

2.1 下载安装

rke2版本信息：https://github.com/rancher/rke2/releases

使用国内镜像地址下载启动脚本

在每个节点都执行下面的脚本
参考：https://docs.rancher.cn/docs/rke2/install/install_options/install_options/_index#%E9%85%8D%E7%BD%AE-linux-%E5%AE%89%E8%A3%85%E8%84%9A%E6%9C%AC

curl -sfL https://rancher-mirror.rancher.cn/rke2/install.sh | INSTALL_RKE2_MIRROR=cn INSTALL_RKE2_VERSION=v1.28.7+rke2r1 INSTALL_RKE2_TYPE=server sh -

上面主要是下载一些必要的安装包。

2.2 第一个节点启动，初始化

在第一个节点启动服务

systemctl start rke2-server
systemctl enable rke2-server
# 第一次启动可能会比较慢，因为要初始化、生成各种文件 
#查看第一次启动后生成的文件
ll /var/lib/rancher/rke2/
ll /var/lib/rancher/rke2/bin/
ll /etc/rancher/rke2/

这里的rke2.yaml 相当于admin.conf 谁拥有该文件就有rke2集群控制权

#查看node节点和pod启动情况
export KUBECONFIG=/etc/rancher/rke2/rke2.yaml
/var/lib/rancher/rke2/bin/kubectl get node
/var/lib/rancher/rke2/bin/kubectl get pod -A

在主节点1执行上述命令，等待集群启动完成后，pod全部正常，接着在该节点执行以下命令进行集群配置。

查看集群的唯一token

# cat /var/lib/rancher/rke2/server/node-token
K10b725b06fb6c540b67cd04599f1da77ec13ab9deda31b43049f4d4c186a9843ed::server:7023bb140ad16a51416cade94ba888a2

修改集群配置文件

vim /etc/rancher/rke2/config.yaml

### 以下为配置文件内容

# server: https://192.168.141.200:9345
# token: K10ebeff7636753f2d8ac49baf35dfaebd5ab8457d42b3cd6b872b9f18aaa1ef8fb::server:484958b563294842f8625b2c5adc06a7 or `cat /var/lib/rancher/rke2/server/token`

write-kubeconfig-mode: "0644"

cluster-cidr: "192.168.60.0/24"
service-cidr: "192.168.61.0/24"

service-node-port-range: 30000-32767

tls-san:
  - "127.0.0.1"
  - "192.168.141.200"
  - "192.168.141.201"
  - "192.168.141.202"
  - "rke2-cluster-master01"
  - "rke2-cluster-master02"
  - "rke2-cluster-master03"

cni: calico

kube-proxy-arg:
  - "proxy-mode=ipvs"

disable:
  - rke2-ingress-nginx

kube-proxy-arg:
  - "proxy-mode=ipvs"

disable-cloud-controller: true
selinux: false
debug: false


data-dir: /home/rancher/rke2

2.3 另外两个节点

另外两个节点参考节点1的配置文件，只需要修改node-name这个参数即可。其他配置项完全相同。

节点2

# server: https://192.168.141.200:9345
# token: K10ebeff7636753f2d8ac49baf35dfaebd5ab8457d42b3cd6b872b9f18aaa1ef8fb::server:484958b563294842f8625b2c5adc06a7 or `cat /var/lib/rancher/rke2/server/token`
server: https://192.168.141.200:9345
token: K10ebeff7636753f2d8ac49baf35dfaebd5ab8457d42b3cd6b872b9f18aaa1ef8fb::server:484958b563294842f8625b2c5adc06a7

write-kubeconfig-mode: "0644"

cluster-cidr: "192.168.60.0/24"
service-cidr: "192.168.61.0/24"

service-node-port-range: 30000-32767

tls-san:
  - "127.0.0.1"
  - "192.168.141.200"
  - "192.168.141.201"
  - "192.168.141.202"
  - "rke2-cluster-master01"
  - "rke2-cluster-master02"
  - "rke2-cluster-master03"

cni: calico

kube-proxy-arg:
  - "proxy-mode=ipvs"

disable:
  - rke2-ingress-nginx

kube-proxy-arg:
  - "proxy-mode=ipvs"

disable-cloud-controller: true
selinux: false
debug: false


data-dir: /home/rancher/rke2

节点3

# server: https://192.168.141.200:9345
# token: K10ebeff7636753f2d8ac49baf35dfaebd5ab8457d42b3cd6b872b9f18aaa1ef8fb::server:484958b563294842f8625b2c5adc06a7 or `cat /var/lib/rancher/rke2/server/token`
server: https://192.168.141.200:9345
token: K10ebeff7636753f2d8ac49baf35dfaebd5ab8457d42b3cd6b872b9f18aaa1ef8fb::server:484958b563294842f8625b2c5adc06a7

write-kubeconfig-mode: "0644"

cluster-cidr: "192.168.60.0/24"
service-cidr: "192.168.61.0/24"

service-node-port-range: 30000-32767

tls-san:
  - "127.0.0.1"
  - "192.168.141.200"
  - "192.168.141.201"
  - "192.168.141.202"
  - "rke2-cluster-master01"
  - "rke2-cluster-master02"
  - "rke2-cluster-master03"

cni: calico

kube-proxy-arg:
  - "proxy-mode=ipvs"

disable:
  - rke2-ingress-nginx

kube-proxy-arg:
  - "proxy-mode=ipvs"

disable-cloud-controller: true
selinux: false
debug: false


data-dir: /home/rancher/rke2

添加好配置文件，在两个节点上启动rke2-server服务

systemctl daemon-reload
systemctl start rke2-server
systemctl enable rke2-server

systemctl status rke2-server -l

确定两个节点启动完毕后，切换到节点1，执行如下命令确认所有节点都加到了集群中。

mkdir ~/.kube/
# /etc/rancher/rke2/rke2.yaml这个配置文件相当于集群的钥匙，管理整个集群
cp /etc/rancher/rke2/rke2.yaml  ~/.kube/config
chmod 600 ~/.kube/config
kubectl get nodes -o wide
kubectl get cs 
kubectl get pods -A -o wide

配置直接使用相关命令，在三个节点中执行

# path设置
vi /etc/profile
export PATH=$PATH:/home/rancher/rke2/bin
source /etc/profile

kubectl常用命令

# 查看集群节点信息
kubectl get nodes -o wide
# 查看集群组件健康状态
kubectl get cs
# 查看pods
kubectl get pods -A -o wide
# 查看服务
kubectl get svc -A -o wide

containerd设置

ln -s /home/rancher/rke2/agent/etc/crictl.yaml /etc/crictl.yaml

设置后就不需要使用–runtime-endpoint参数来查看容器情况了

2.4 crictl常用命令

crictl --help
crictl info
crictl ps
crictl images ls
钟Li枫
关注
  • 26
    点赞
  • 踩
  • 9
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
高可用RKE2部署kubernetes（适用于生产环境）
qq_23435961的博客
11-28 1717
高可用RKE2集群部署kubernetes
基于基于rke2的K8S部署过程记录- rke2 + rancher + metallb
最新发布
雁过留痕
05-18 699
我基于rke2部署了一套三节点的k8s，同时部署了rancher 和 metallb
Ubuntu系统离线安装RKE2+Rancher2.7.5全过程记录
dxwd的专栏
07-12 3135
参考链接：https://docs.rancher.cn/docs/rancher2/installation/resources/advanced/self-signed-ssl/_index/查看/var/lib/rancher/rke2/server/token文件获得token，并修改/etc/rancher/rke2/config.yaml；把上面在mu01下载的文件都复制到cu01，同时把mu01的/usr/local/bin/helm复制到cu01中 /usr/local/bin/helm。
Rancher-RKE2-安装流程
博然的宝藏库
08-22 1046
1.重要的是，RKE2 不像 RKE1 那样依赖 Docker。RKE1 利用 Docker 来部署和管理控制平面组件以及 Kubernetes 的容器运行时间。RKE2 将控制平面组件作为静态 pod 启动，由 kubelet 管理。嵌入的容器运行时是 containerd。token替换下面的 ,server 为rke2 server节点ip或者可以解析到的主机名。1.rke2是Rancher的下一代k8s发行版，一、什么是rke2？
K8s（Kubernetes）简介及安装部署
lvjianzhaoa的博客
11-04 6579
前言： k8s是Kubernetes的简称，因为K和S之间有8个字母，所以才会被称为k8s。 k8s最初是在Google公司内部使用了10多年的技术，它的前身是叫做Borg（博格），直到2015年才被Google公司捐赠为开源项目。 如果之前我们有接触过OpenStack，那么应该知道管理VM虚拟机资源可以用OpenStack。那么管理容器所对应的开源平台是什么呢？k8s就是其中之一，在k8s之...
部署K8S集群
z2050025507的博客
08-11 870
4）发现最先创建的pod运行在k8s-master节点上，下载镜像速度太慢没法运行。1）在k8s-master节点安装flannel。5）在master节点检测node节点状态。5）在master节点检测node节点状态。2）node2连接k8s-master。2）配置node1节点flannel网络。2）node1连接k8s-master。2）安装k8s-master节点。1）配置k8s-master节点。2）配置k8s-node1节点。3）配置k8s-node2节点。1）安装etcd配置etcd。
RKE2安装kubernetes（2）
m0_49654228的博客
09-14 3607
RKE2安装kubernetes 环境准备 修改主机名 hostnamectl set-hostname rke2-1 && bash 系统版本 [root@rke2-4 ~]# uname -a Linux rke2-4 3.10.0-693.el7.x86_64 #1 SMP Tue Aug 22 21:09:27 UTC 2017 x86_64 x86_64 x86_64 GNU/Linux [root@rke2-4 ~]# cat /etc/redhat-release
2023年最详细K8S部署（Kubernetes）+解决浏览器访问问题
weixin_55265943的博客
10-20 3462
一看就会的K8s搭建，超详细
SUSE12SP5 用RKE方式离线部署K8S
08-30
SUSE12SP5 用RKE方式离线部署K8S
rke方式安装k8s.docx
06-19
RKE是一个用Golang编写的Kubernetes安装程序，极为简单易用，用户不再需要做大量的准备工作，即可拥有闪电般快速的Kubernetes安装部署体验。 rke,node1,node2都安装docker-ce： yum install -y docker-ce
rancher+k8s+etcd集群
08-18
使用RKE构建企业生产Kubernetes集群 内容包含： 1.集群主机准备 2.daocker部署 3.docker compose安装 4.添加rancher用户 5.生成ssh证书用户部署集群 6.rke工具下载 7.初始化rke配置文件 ....
centos7.8支持的rke1.3.6的安装文件rke-linux-amd64
02-05
centos7.8支持的rke1.3.6的安装文件rke_linux-amd64,用于rke安装k8s集群
terraform-provider-rke:Terraform provider插件，用于通过RKE部署Kubernetes集群（Rancher Kubernetes引擎）
05-07
Terraform RKE提供程序可以使用轻松部署Kubernetes集群。 网站： ： 文件： ： 邮件列表： 要求 > = 0.12.x 1.14来构建提供程序插件 17.03.x运行验收测试 安装提供程序 对于terraform 0.13或更高版本的用户，...
rke2 安装k8s集群 v1.21.6 版本
yhf597869822的博客
11-20 3610
前言：与rke1部署方式不同，rke2使用rke2-server、rke2-agent管理k8s集群，无须对各个节点进行ssh互信，此外，rke2-server具备worker的能力。 rke2安装k8s集群前言：与rke1部署方式不同，rke2使用rke2-server、rke2-agent管理k8s集群，无须对各个节点进行ssh互信，此外，rke2-server具备worker的能力。一、安装前准备工作1. 替换yum源2. 修改系统参数3. 关闭防火墙，并关闭开机自启4. 配置/etc/host二、安
rke部署k8s集群（包含清理）
这是一个将要崛起小达人
05-10 1593
1、下载rke工具 https://github.com/rancher/rke/releases 选择对应版本然后重命名为rke 2、禁用虚拟内存 vm.swappiness=0 3、ssh配置文件打开配置 AllowTcpForwarding yes 4、安装docker-ce 5、将用户加入docker组 （centos不能用root用户并禁用 NetworkManager） usermod -aG docker <user_name> 6、运行./rke config --list-
k8s集群部署（rke + rancher）
shanyaodou的博客
06-12 1135
k8s集群部署（rke + rancher）
RKE部署高可用k8s集群+高可用Rancher
alisxwy的博客
05-12 774
rke工具部署k8s+rancher高可用集群
安装django
山谷里的小水泡
05-02 537
使用pip安装 pip install django=='1.8'检查django版本python -c 'import django;print django.get_version()'如果已安装会输出django的版本 如果没有安装会输出ImportError: No module named django
RKE2部署高可用K8S
10-31
相比于传统的Kubernetes部署方式，RKE2具有以下优点： 1. RKE2使用了更加轻量级的etcd替代了传统的etcd集群，从而减少了集群的复杂度和维护成本。 2. RKE2内置了CNI插件，可以快速地为集群中的Pod分配IP地址。 3. ...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值