centos7.6 跨云k3s部署

1. iptables规则配置

-A INPUT -p tcp -m state --state NEW -m tcp --dport 6443 -j ACCEPT
-A INPUT -p udp -m state --state NEW -m udp --dport 51820 -j ACCEPT
-A INPUT -p tcp -m state --state NEW -m tcp --dport 10250 -j ACCEPT
-A INPUT -p tcp -m state --state NEW -m tcp --dport 2379 -j ACCEPT
-A INPUT -p tcp -m state --state NEW -m tcp --dport 2380 -j ACCEPT
-A INPUT -p tcp -m state --state NEW -m tcp --dport 30000:32767 -j ACCEPT

2. 升级内核-所有节点

① 载入公钥

$ rpm --import https://www.elrepo.org/RPM-GPG-KEY-elrepo.org

② 升级安装 elrepo

$ rpm -Uvh http://www.elrepo.org/elrepo-release-7.0-3.el7.elrepo.noarch.rpm

③ 载入 elrepo-kernel 元数据

$ yum --disablerepo=\* --enablerepo=elrepo-kernel repolist

④ 安装最新版本的内核

$ yum --disablerepo=\* --enablerepo=elrepo-kernel install  kernel-ml.x86_64  -y

⑤ 删除旧版本工具包

$ yum remove kernel-tools-libs.x86_64 kernel-tools.x86_64  -y

⑥ 安装新版本工具包

$ yum --disablerepo=\* --enablerepo=elrepo-kernel install kernel-ml-tools kernel-ml-devel kernel-ml-headers -y

⑦ 查看内核插入顺序

$ grep "^menuentry" /boot/grub2/grub.cfg | cut -d "'" -f2

默认新内核是从头插入，默认启动顺序也是从 0 开始。

⑧ 查看当前实际启动顺序

$ grub2-editenv list

saved_entry=CentOS Linux (3.10.0-1127.10.1.el7.x86_64)7(Core)

⑨ 设置默认启动

$ grub2-set-default 'CentOS Linux (6.1.8-1.el7.elrepo.x86_64) 7 (Core)'

最后重启检查：

$ reboot
$ uname -r

3. 安装wireguard-所有节点

yum install epel-release https://www.elrepo.org/elrepo-release-7.el7.elrepo.noarch.rpm -y
yum install yum-plugin-elrepo -y
yum install kmod-wireguard wireguard-tools-y

4. 部署k3s

1. 部署server-最简

curl -sfL https://get.k3s.io | INSTALL_K3S_MIRROR=cn sh  -s -  --node-external-ip <public-ip> --advertise-address <public-ip> --node-ip <public-ip> --flannel-backend wireguard

2. 部署agent

curl -sfL https://get.k3s.io | INSTALL_K3S_MIRROR=cn K3S_URL=https://<master-public-ip>:6443 K3S_TOKEN=<token> sh -s - --node-external-ip <public-ip> --node-ip <public-ip>

token 位置，master： /var/lib/rancher/k3s/server/node-token

config位置，master: /etc/rancher/k3s/k3s.yaml

国内： https://get.k3s.io 换 http://rancher-mirror.cnrancher.com/k3s/k3s-install.sh

目前版本为 1.25.6+k3s1

5. 调通内网

kubectl annotate nodes <master> flannel.alpha.coreos.com/public-ip-overwrite=<master_pub_ip>
kubectl annotate nodes <node> flannel.alpha.coreos.com/public-ip-overwrite=<node_pub_ip>

注解后重启各节点

6. 其他

1. 卸载

/usr/local/bin/k3s-uninstall.sh
/usr/local/bin/k3s-agent-uninstall.sh