快速部署一个k8s集群

kubeadm是官方社区推出的一个用于快速部署kubernetes集群的工具。

这个工具能通过两条指令完成一个kubernetes集群的部署：

# 创建一个 Master 节点
$ kubeadm init
​
# 将一个 Node 节点加入到当前集群中
$ kubeadm join <Master节点的IP和端口 >

1. 安装要求

在开始之前，部署Kubernetes集群机器需要满足以下几个条件：

• 一台或多台机器，操作系统 CentOS7.x-86_x64

• 硬件配置：2GB或更多RAM，2个CPU或更多CPU，硬盘30GB或更多

• 可以访问外网，需要拉取镜像，如果服务器不能上网，需要提前下载镜像并导入节点

• 禁止swap分区

2. 准备环境

角色	IP
master	192.168.1.11
node1	192.168.1.12
node2	192.168.1.13

# 关闭防火墙

systemctl stop firewalld
systemctl disable firewalld

​
# 关闭selinux

sed -i 's/enforcing/disabled/' /etc/selinux/config  # 永久
setenforce 0  # 临时
​

# 关闭swap

swapoff -a  # 临时
sed -ri 's/.*swap.*/#&/' /etc/fstab    # 永久

​
# 根据规划设置主机名
hostnamectl set-hostname <hostname>
​
# 在master添加hosts
注意自己的ip

cat >> /etc/hosts << EOF
192.168.31.164 k8smaster
192.168.31.40 k8snode1
192.168.31.166 k8snode2
EOF

​
# 将桥接的IPv4流量传递到iptables的链

cat > /etc/sysctl.d/k8s.conf << EOF
net.bridge.bridge-nf-call-ip6tables = 1
net.bridge.bridge-nf-call-iptables = 1
EOF
sysctl --system  # 生效

​
# 时间同步

yum install ntpdate -y
ntpdate time.windows.com

3. 所有节点安装Docker/kubeadm/kubelet

Kubernetes默认CRI（容器运行时）为Docker，因此先安装Docker。

3.1 安装Docker

安装docker20.10版本(docker版本K8版本对应20.1对应1.21.0)

 yum -y install docker-ce-3:20.10.8-3.el7.x86_64 docker-ce-cli-3:20.10.8-3.el7.x86_64 containerd.io

systemctl enable docker && systemctl start docker

docker --version


如果yum没有找到可以执行再重新yum

yum install -y yum-utils device-mapper-persistent-data lvm2

yum-config-manager --add-repo http://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo

cat > /etc/docker/daemon.json << EOF
{
  "registry-mirrors": ["https://b9pmyelo.mirror.aliyuncs.com"]
}
EOF

3.2 添加阿里云YUM软件源

cat > /etc/yum.repos.d/kubernetes.repo << EOF
[kubernetes]
name=Kubernetes
baseurl=https://mirrors.aliyun.com/kubernetes/yum/repos/kubernetes-el7-x86_64
enabled=1
gpgcheck=0
repo_gpgcheck=0
gpgkey=https://mirrors.aliyun.com/kubernetes/yum/doc/yum-key.gpg https://mirrors.aliyun.com/kubernetes/yum/doc/rpm-package-key.gpg
EOF

3.3 安装kubeadm，kubelet和kubectl

由于版本更新频繁，这里指定版本号部署：

安装之前切记先配置k8s源！！！！！

yum install -y kubelet-1.21.10 kubeadm-1.21.10 kubectl-1.21.10
systemctl enable kubelet

4. 部署Kubernetes Master

在192.168.31.164（Master）执行。

kubeadm init \
  --apiserver-advertise-address=192.168.65.100 \
  --image-repository=registry.cn-hangzhou.aliyuncs.com/google_containers \
  --kubernetes-version=v1.21.10 \
  --service-cidr=10.96.0.0/16 \
  --pod-network-cidr=10.244.0.0/16

由于默认拉取镜像地址k8s.gcr.io国内无法访问，这里指定阿里云镜像仓库地址。

注意：

• apiserver-advertise-address 一定要是主机的 IP 地址。

• apiserver-advertise-address 、service-cidr 和 pod-network-cidr 不能在同一个网络范围内。

• 不要使用 172.17.0.1/16 网段范围，因为这是 Docker 默认使用的。

使用kubectl工具：

mkdir -p $HOME/.kube
sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
sudo chown $(id -u):$(id -g) $HOME/.kube/config
kubectl get nodes

5. 加入Kubernetes Node

在（Node节点）执行。

向集群添加新节点，执行在kubeadm init输出的kubeadm join命令：

• 根据日志提示操作，在 node1 和 node2 执行如下命令：

• 

  如果添加时报错可能时token过期

$ kubeadm join 192.168.1.11:6443 --token esce21.q6hetwm8si29qxwn \
    --discovery-token-ca-cert-hash sha256:00603a05805807501d7181c3d60b478788408cfe6cedefedb1f97569708be9c5

默认token有效期为24小时，当过期之后，该token就不可用了。这时就需要重新创建token，操作如下：

kubeadm token create --print-join-command
# 生成一个永不过期的token
kubeadm token create --ttl 0 --print-join-command

6. 部署CNI网络插件

Kubernetes 支持多种网络插件，比如 flannel、calico、canal 等，任选一种即可，本次选择 calico 在 master 节点上执行

执行

​
kubectl apply -f https://projectcalico.docs.tigera.io/v3.19/manifests/calico.yaml

​

网速怕慢的话执行下面

wget https://raw.githubusercontent.com/coreos/flannel/master/Documentation/kube-flannel.yml
默认镜像地址无法访问，sed命令修改为docker hub镜像仓库。
kubectl apply -f https://raw.githubusercontent.com/coreos/flannel/master/Documentation/kube-flannel.yml

查看进度

查看进度

watch kubectl get pods -n kube-system
kubectl get pods -n kube-system

​
​
NAME                          READY   STATUS    RESTARTS   AGE
kube-flannel-ds-amd64-2pc95   1/1     Running   0          72s

7. 测试kubernetes集群

在Kubernetes集群中创建一个pod，验证是否正常运行：

部署 Nginx ：
kubectl create deployment nginx --image=nginx
暴露端口：
kubectl expose deployment nginx --port=80 --type=NodePort
查看服务状态：
kubectl get pod,svc

   8.  k8s集群重新初始化

重新引导k8s集群的步骤如下：

在master节点执行下面reset命令：

kubeadm reset
# 过程会询问是否重置，输入y然后回车
手动清除配置信息，这一步很关键：（前提你已经创建）
rm -rf /root/.kube
rm -rf /etc/cni/net.d
yum install -y ipvsadm
ipvsadm -C
iptables -F && iptables -t nat -F && iptables -t mangle -F && iptables -X
重新引导集群
kubeadm init xxxxx

重置工作节点
kubeadm reset
手动删除目录
rm -rf /root/.kube
rm -rf /etc/cni/net.d
rm -rf /etc/kubernetes/*
ipvsadm -C
iptables -F && iptables -t nat -F && iptables -t mangle -F && iptables -X
kubeadm join xxx		
#获取该指令可以通过在master节点上执行：kubeadm token create --print-join-command