裸机部署k8s集群

1、准备工作

服务器

建议最小硬件配置：2核CPU、2G内存、20G硬盘 服务器最好可以访问 外网，会有从网上拉取镜像需求，如果服务器不能上网，需要提前下载对应镜像并导入节点

需要至少2台服务器，1台作为master节点，1台作为node接口。

主节点需要组件

• docker（也可以是其他容器运行时）
• kubectl 集群命令行交互工具
• kubeadm 集群初始化工具

工作节点需要组件

• docker（也可以是其他容器运行时）
• kubelet 管理 Pod 和容器，确保他们健康稳定运行。
• kube-proxy 网络代理，负责网络相关的工作

2、开始安装

设置主机名

# 每个节点分别设置对应主机名

hostnamectl set-hostname master

hostnamectl set-hostname node1

hostnamectl set-hostname node2

 修改hosts

# 所有节点都修改 hosts

vim /etc/hosts

172.17.7.82 master

172.17.8.84 node1

172.17.8.86 node2

关闭SELinux及防火墙

setenforce 0

sed -i --follow-symlinks 's/SELINUX=enforcing/SELINUX=disabled/g' /etc/sysconfig/selinux

systemctl stop firewalld
systemctl disable firewalld

添加安装源

# 添加 k8s 安装源

cat <<EOF > kubernetes.repo
[kubernetes]
name=Kubernetes
baseurl=https://mirrors.aliyun.com/kubernetes/yum/repos/kubernetes-el7-x86_64
enabled=1
gpgcheck=0
repo_gpgcheck=0
gpgkey=https://mirrors.aliyun.com/kubernetes/yum/doc/yum-key.gpg https://mirrors.aliyun.com/kubernetes/yum/doc/rpm-package-key.gpg
EOF
mv kubernetes.repo /etc/yum.repos.d/

# 添加Docker安装源
yum -y install yum-utils
yum-config-manager --add-repo http://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo

安装所需组件

yum install -y kubelet-1.23.0 kubectl-1.23.0 kubeadm-1.23.0 docker-ce

启动kubelet、docker，并设置开机启动

systemctl enable kubelet
systemctl start kubelet
systemctl enable docker
systemctl start docker

修改docker配置

# kubernetes 官方推荐 docker 等使用 systemd 作为 cgroupdriver，否则 kubelet 启动不了
cat <<EOF > daemon.json
{
"exec-opts": ["native.cgroupdriver=systemd"],
"registry-mirrors": ["https://ud6340vz.mirror.aliyuncs.com"]
}
EOF
mv daemon.json /etc/docker/

# 重启生效
systemctl daemon-reload
systemctl restart docker

用kubeadm初始化集群（仅在主节点跑）

kubeadm init --control-plane-endpoint 172.17.7.82:6443 --image-repository registry.aliyuncs.com/google_containers --kubernetes-version v1.23.0 --service-cidr=10.96.0.0/12 --pod-network-cidr=10.244.0.0/16 --ignore-preflight-errors=all

# 记得把 kubeadm join xxx 保存起来
# 忘记了重新获取：kubeadm token create --print-join-command
# 复制授权文件，以便 kubectl 可以有权限访问集群
# 如果你其他节点需要访问集群，需要从主节点复制这个文件过去其他节点
mkdir -p $HOME/.kube
cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
chown $(id -u):$(id -g) $HOME/.kube/config

工作节点加入集群

kubeadm join 172.17.7.82:6443 --token 1nghas.q2hkge2ou5alu0md --discovery-token-ca-cert-hash xxx

 安装网络插件，否则node是NotReady状态

# 很有可能国内网络访问不到这个资源，你可以网上找找国内的源安装 flannel
kubectl apply -f https://raw.githubusercontent.com/coreos/flannel/master/Documentation/kube-flannel.yml

# 如果上面的插件安装失败，可以选用 Weave，下面的命令二选一就可以了。
kubectl apply -f https://github.com/weaveworks/weave/releases/download/v2.8.1/weave-daemonset-k8s.yaml
kubectl apply -f http://static.corecore.cn/weave.v2.8.1.yaml

# 更多其他网路插件查看下面介绍，自行网上找 yaml 安装
https://blog.csdn.net/ChaITSimpleLove/article/details/117809007

3、踩坑记录

如上是基本安装步骤，按照上述步骤，基本会会出现master和node节点NotReady的情况。如果运气好，一次安装成功，可以不用往下看了。

手动安装calico网络插件

下载配置文件

 # 测试时下载的v3.25.0版本，也可以直接访问：https://calico-v3-25.netlify.app/archive/v3.25/manifests/calico.yaml

curl https://projectcalico.docs.tigera.io/manifests/calico.yaml -O

 修改配置文件

打开CALICO_IPV4POOL_CIDR注释，并修改value，和--pod-network-cidr保持一致

离线安装镜像

下载网址

由于默认的Calico清单文件中所使用的镜像来源于docker.io国外镜像源，可能会拉取失败，因此手动导入镜像。先下载

release-v3.25.0.tgz

# 下载镜像包，如果服务器下载慢，可以先下载好，传上去

wget https://github.com/projectcalico/calico/releases/download/v3.25.0/release-v3.25.0.tgz

# 解压缩

tar zxvf release-v3.25.0.tgz

# 导入镜像

cd release-v3.25.0

docker load -i calico-cni.tar

docker load -i calico-node.tar

docker load -i calico-kube-controllers.tar

# 修改calico.yaml，去掉image里的docker.io/

# 修改完成后执行

kubectl apply -f calico.yaml

工作节点

如果工作节点出现NotReady情况，修改/var/kubelet/kubeadm-flag.env，去掉--network-plugin=cni，然后重启kubelet。

vim /var/lib/kubelet/kubeadm-flags.env

# 删掉其中--network-plugin=cni

# 重启kubelet

systemctl restart kubelet