kubernetes集群部署
前言
k8s全称kubernetes,k8s是为容器服务而生的一个可移植容器的编排管理工具,越来越多的公司正在拥抱k8s,并且当前k8s已经主导了云业务流程,推动了微服务架构等热门技术的普及和落地。
首先,我们从容器技术谈起,在容器技术之前,大家开发用虚拟机比较多,比如vmware和openstack,我们可以使用虚拟机在我们的操作系统中模拟出多台子电脑(Linux),子电脑之间是相互隔离的,但是虚拟机对于开发和运维人员而言,存在启动慢,占用空间大,不易迁移的缺点。
接着,容器化技术应运而生,它不需要虚拟出整个操作系统,只需要虚拟一个小规模的环境即可,而且启动速度很快,除了运行其中应用以外,基本不消耗额外的系统资源。Docker是应用最为广泛的容器技术,通过打包镜像,启动容器来创建一个服务。但是随着应用越来越复杂,容器的数量也越来越多,由此衍生了管理运维容器的重大问题,而且随着云计算的发展,云端最大的挑战,容器在漂移。在此业务驱动下,k8s问世,提出了一套全新的基于容器技术的分布式架构领先方案,在整个容器技术领域的发展是一个重大突破与创新。
那么,K8S实现了什么?
从架构设计层面,我们关注的可用性,伸缩性都可以结合k8s得到很好的解决,如果你想使用微服务架构,搭配k8s,真的是完美,再从部署运维层面,服务部署,服务监控,应用扩容和故障处理,k8s都提供了很好的解决方案。
具体来说,主要包括以下几点:
服务发现与调度
负载均衡
服务自愈
服务弹性扩容
横向扩容
存储卷挂载
总而言之,k8s可以使我们应用的部署和运维更加方便。
一、K8S集群准备工作
先准备三台服务器,1台做master,2台做node
192.168.153.180 ===》k8s-master
192.168.153.181 ===》k8s-node1
192.168.153.182 ===》k8s-node2
1、关闭swap分区,k8s无法使用swap (所有机器上执行 )
swapoff -a # 临时关闭
注释掉/etc/fstab里面的swap那一行,实现永久关闭
2、关闭防火墙 (所有机器上执行)
systemctl stop firewalld
systemctl disable firewalld
3、根据规划设置主机名 (所有机器上执行)
hostnamectl set-hostname k8s-master
hostnamectl set-hostname k8s-node1
hostnamectl set-hostname k8s-node2
4、在master上添加hosts
cat >> /etc/hosts << EOF
192.168.153.180 k8s-master
192.168.153.181 k8s-node1
192.168.153.182 k8s-node2
EOF
5、将桥接的IPv4流量传递到iptables的链 (所有机器上执行)
cat >> /etc/sysctl.d/k8s.conf << EOF
net.bridge.bridge-nf-call-ip6tables = 1
net.bridge.bridge-nf-call-iptables = 1
EOF
sysctl --system #让配置生效
6、时间同步 (需要在所有机器上执行)
yum install ntpdate -y
ntpdate time.windows.com
二、安装Docker/kubeadm/kubelet(所有机器上执行)
1、安装Docker
wget https://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo -O /etc/yum.repos.d/docker-ce.repo
yum install -y docker-ce
systemctl start docker && systemctl enable docker
2、配置镜像下载加速器
cat >> /etc/docker/daemon.json << EOF
{
"registry-mirrors": ["https://b9pmyelo.mirror.aliyuncs.com"],
"exec-opts": ["native.cgroupdriver=systemd"]
}
EOF
systemctl restart docker
docker info | grep systemd
3、添加阿里云YUM软件源
cat >> /etc/yum.repos.d/kubernetes.repo << EOF
[Kubernetes]
name=Kubernetes
baseurl=https://mirrors.aliyun.com/kubernetes/yum/repos/kubernetes-el7-x86_64
enabled=1
gpgcheck=0
repo_gpgcheck=0
gpgkey=https://mirrors.aliyun.com/kubernetes/yum/doc/yum-key.gpg
https://mirrors.aliyun.com/kubernetes/yum/doc/rpm-package-key.gpg
EOF
4、安装 kubeadm,kubelet和kubectl。由于版本更新频繁,所以指定版本部署
yum install -y kubelet-1.23.0 kubeadm-1.23.0 kubectl-1.23.0
systemctl enable kubelet
5、部署Kubernetes Master (master机器上执行)
kubeadm init \
--apiserver-advertise-address=192.168.153.180 \
--image-repository registry.aliyuncs.com/google_containers \
--kubernetes-version v1.23.0 \
--service-cidr=10.96.0.0/12 \
--pod-network-cidr=10.244.0.0/16 \
--ignore-preflight-errors=all
# 初始化完成后,最后会输出一个join命令,先保存后面要使用
6、拷贝kubectl使用的连接k8s认证文件到默认路径(master机器上执行)
mkdir -p $HOME/.kube
sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
sudo chown $(id -u):$(id -g) $HOME/.kube/config
7、将node节点加入到master节点中
7、将node节点加入到master节点中
将最后一个join命令到任意node节点上执行,执行完成后就可以在master上看到2台node节点加入到工作中
kubectl get node #(查看集群命令)
#在master上执行上面的命令,可以在master上看到所有集群节点
8、部署容器网络(master机器上执行)
所有的yaml文件都只在master上执行
Calico是一个纯三层的网络方案,是目前K8S主流的网络方案。
wget https://docs.projectcalico.org/v3.20/manifests/calico.yaml
# 修改配置文件中定义的Pod网络(CALICO_IPV4POOL_CIDR),
# - name: CALICO_IPV4POOL_CIDR
# value: "192.168.0.0/16"
#将这两行取消注释,然后将192.168.0.0/16这个网段替换成上方初始化时的10.244.0.0/16这个网段
kubectl apply -f calico.yaml # 执行calico.yaml这个文件
kubectl get pods -n kube-system # 查看部署运行时的状态,当状态全部为runngin就成功了
NAME READY STATUS RESTARTS AGE
calico-kube-controllers-7c845d499-jjs85 1/1 Running 8 (<invalid> ago) 13d
calico-node-jxxm2 1/1 Running 16 (<invalid> ago) 13d
calico-node-p7qk9 1/1 Running 8 (<invalid> ago) 13d
calico-node-t6r2p 1/1 Running 8 (126m ago) 13d
coredns-6d8c4cb4d-4z796 1/1 Running 8 (<invalid> ago) 13d
coredns-6d8c4cb4d-x2lcj 1/1 Running 8 (<invalid> ago) 13d
etcd-k8s-master 1/1 Running 8 (126m ago) 13d
kube-apiserver-k8s-master 1/1 Running 11 (126m ago) 13d
kube-controller-manager-k8s-master 1/1 Running 9 (126m ago) 13d
kube-proxy-99p25 1/1 Running 15 (<invalid> ago) 13d
kube-proxy-grlpg 1/1 Running 8 (<invalid> ago) 13d
kube-proxy-xhbh8 1/1 Running 8 (126m ago) 13d
kube-scheduler-k8s-master 1/1 Running 9 (126m ago) 13d
9、部署Dashboard(master机器上执行)
Dashboard是官方提供的一个 UI,用于管理K8S资源。
默认Dashboard只能集群内部访问,修改Service为NodePort类型,暴露给外部访问。
wget https://raw.githubusercontent.com/kubernetes/dashboard/v2.4.0/aio/deploy/recommended.yaml # 下载不了的可以去下载我上传的资源中有修改过的recommended.yaml这个文件。
#打开recommended.yaml配置文件,找到如下这段配置,新增2个参数
kind: Service
apiVersion: v1
metadata:
labels:
k8s-app: kubernetes-dashboard
name: kubernetes-dashboard
namespace: kubernetes-dashboard
spec:
type: NodePort # 新增
ports:
- port: 443
targetPort: 8443
nodePort: 30001 # 新增,默认是从30000开始的
selector:
k8s-app: kubernetes-dashboard
------------------------------
kubectl apply -f recommended.yaml
kubectl get pods -n kubernetes-dashboard #查看状态是否是running,状态为running就可以去浏览器进行访问
10、访问dashboard
访问地址:https://任意NodeIP:30001 #访问时,需要输入一个token
创建service account,绑定默认cluster-admin管理员集群角色:
kubectl create serviceaccount dashboard-admin -n kube-system #创建用户
kubectl create clusterrolebinding dashboard-admin --clusterrole=cluster-admin --serviceaccount=kube-system:dashboard-admin
kubectl describe secrets -n kube-system $(kubectl -n kube-system get secret | awk '/dashboard-admin/{print $1}') #获取用户token
#使用输出的token登录dashboard
总结
刚入门K8S的萌新,有什么错误的地方,欢迎各位大佬来指点。