使用kubeadm搭建k8s集群

已于 2022-05-04 02:52:27 修改
阅读量696 收藏
点赞数
分类专栏： 云原生 文章标签： html5
于 2021-09-29 00:42:35 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_38376348/article/details/120539528
版权
本文详细介绍了在CentOS8操作系统上从零搭建Kubernetes集群的步骤，包括设置主机名、关闭防火墙、配置SSH、网络转发、IPVS、主机文件、仓库、Docker以及安装Kubernetes组件。还涉及节点加入集群、Flannel网络插件的安装、Nginx pod创建、Service访问以及Dashboard的安装和管理。文章中提供了详细的命令行操作和问题解决方法。
摘要由CSDN通过智能技术生成

目录

设置host

关闭防火墙

配置ssh

配置网络转发

配置ipvs

配置host

配置仓库

安装组件：

配置KUBE_PROXY_MODE

创建集群

node加入集群

安装flannel否则节点一直处于noready

 创建nginx的pod

创建svc并访问服务：

          安装dashboard

设置host

各主机执行

hostnamectl --static set-hostname  master
hostnamectl --static set-hostname  node1
hostnamectl --static set-hostname  node2

关闭防火墙

各主机执行

systemctl stop firewalld & systemctl disable firewalld
systemctl stop iptables  & systemctl disable iptables
sed -i 's/enforcing/disabled/' /etc/selinux/config
setenforce 0

配置ssh

各主机执行

修改/etc/ssh/sshd_config助释放开：PubkeyAuthentication yes
mkdir /root/.ssh
scp ./id_rsa.pub root@10.211.55.5:/root/.ssh
cat /root/.ssh/id_rsa.pub > /root/.ssh/authorized_keys
chmod 700 /root/.ssh
chmod 600 /root/.ssh/authorized_keys

配置网络转发

各主机执行

编辑：vi /etc/sysctl.d/kubernetes.conf
net.bridge.bridge-nf-call-ip6tables = 1
net.bridge.bridge-nf-call-iptables = 1
net.ipv4.ip_forward = 1

#重载配置
sysctl -p
# 加载网桥过滤模块
modprobe br_netfilter
# 查看网桥过滤模块是否加载成功
lsmod | grep br_netfilter

配置ipvs

各主机执行

yum install ipset ipvsadmin -y
cat <<EOF > /etc/sysconfig/modules/ipvs.modules
#!/bin/bash
modprobe -- ip_vs
modprobe -- ip_vs_rr
modprobe -- ip_vs_wrr
modprobe -- ip_vs_sh
modprobe -- nf_conntrack_ipv4
EOF
chmod +x /etc/sysconfig/modules/ipvs.modules
/bin/bash /etc/sysconfig/modules/ipvs.modules
lsmod | grep -e ip_vs -e nf_conntrack_ipv4

配置host

各主机执行

cat <<EOF > /etc/hosts
10.211.55.3 master
10.211.55.4 node1
10.211.55.5 node2
EOF

配置仓库

各主机执行

配置kubernetes.repo

cat <<EOF > /etc/yum.repos.d/kubernetes.repo
[kubernetes]
name=Kubernetes
baseurl=https://mirrors.aliyun.com/kubernetes/yum/repos/kubernetes-el7-x86_64/
enabled=1
gpgcheck=0
repo_gpgcheck=1
gpgkey=https://mirrors.aliyun.com/kubernetes/yum/doc/yum-key.gpg https://mirrors.aliyun.com/kubernetes/yum/doc/rpm-package-key.gpg
EOF

配置docker

registry-mirrors镜像地址获取方法：

访问：https://cr.console.aliyun.com/

wget https://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo -O /etc/yum.repos.d/docker-ce.repo
yum install --setopt=obsoletes=0 docker-ce-18.06.3.ce-3.el7 -y
mkdir -p /etc/docker
tee /etc/docker/daemon.json <<-'EOF'
{
  "registry-mirrors": ["https://xxxxx.mirror.aliyuncs.com"]
}
EOF

安装组件：

各主机执行

yum install --setopt=obsoletes=0 kubeadm-1.17.4-0 kubelet-1.17.4-0 -y

配置KUBE_PROXY_MODE

各主机执行

vim /etc/sysconfig/kubelet

KUBELET_CGROUP_ARGS="--cgroup-driver=systemd"
KUBE_PROXY_MODE="ipvs"

创建集群

各主机执行：

systemctl enable kubelet.service
systemctl start kubelet.service
systemctl enable kube-proxy.service
systemctl start kube-proxy.service
systemctl start docker & systemctl enable docker

master执行 

kubeadm init \
--apiserver-advertise-address=10.211.55.3 \
--image-repository registry.aliyuncs.com/google_containers \
--kubernetes-version=v1.17.4 \
--pod-network-cidr=10.244.0.0/16 \
--service-cidr=10.96.0.0/12

master主机执行

mkdir -p $HOME/.kube
cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
chown $(id -u):$(id -g) $HOME/.kube/config

node加入集群

node主机需要

kubeadm join 10.211.55.3:6443 --token 1rp3tx.xgumf4f7vcdbf0u2 \
    --discovery-token-ca-cert-hash sha256:5978ae9c8cf4f17af81a65c338f9b21e3440ab878ae79daab4119c9568a5ca4e

如果遇到报错，根据显示有可能是docker没启动或者k8s api-server 没启动，或者token失效，对于token失效，则通过kubeadm join token失效 - mvpbang - 博客园

中kubeadm token create --print-join-command创建新token，默认token有失时间，也可以设置用不失效

kubeadm join 10.211.55.3:6443 --token 1rp3tx.xgumf4f7vcdbf0u2 --discovery-token-ca-cert-hash sha256:5978ae9c8cf4f17af81a65c338f9b21e3440ab878ae79daab4119c9568a5ca4e

 

 

安装flannel否则节点一直处于noready

注意如果在执行kubectl的时候遇到了报错“The connection to server localhost:8080 was refused did you specify the right host or port”,可以参考flannel安装报错_Fly_鹏程万里-CSDN博客配置添加环境变量，export KUBECONFIG=/etc/kubernetes/admin.conf 至source /etc/profile，没有则忽略

master主机需要

wget https://raw.githubusercontent.com/coreos/flannel/master/Documentation/kube-flannel.yml
kubectl apply -f kube-flannel.yml
kubectl get nodes

 

 master节点镜像：

查看所有命令空间和命名空间下的pod:

 创建nginx的pod

master主机执行

kubectl create deployment nginx --image=nginx:1.14-alpine
kubectl get deploy
kubectl describe pod nginx-6867cdf567-9tbg9

创建svc并访问服务：

kubectl expose deploy nginx --port=80 --target-port=80 --type=NodePort
service/nginx exposed

外部访问：master节点ip+svc中的ports端口

http://10.211.55.3:32022/

kubectl get pod -o wide

查看pod ip

在集群内部可以：

kubectl get svc

kubectl get svc --all-namespaces

查看service ip

这里要区分：

ClusterIP：只对集群内部可见

NodePort：对外部可见

 

安装dashboard

wget https://raw.githubusercontent.com/kubernetes/dashboard/v1.10.1/src/deploy/recommended/kubernetes-dashboard.yaml

nodePort: 30001 

 kubectl apply -f kubernetes-dashboard.yaml

​​​​​​​

 访问：https://10.211.55.3:30001/#!/login

重装或删除dashboard

kubectl delete -f kubernetes-dashboard.yaml
kubectl create -f kubernetes-dashboard.yaml

删除pod 

kubectl -n kube-system delete $(kubectl -n kube-system get pod -o name | grep dashboard)

删除kubernetes-dashboard

kubectl delete deployment kubernetes-dashboard --namespace=kube-system 
kubectl delete service kubernetes-dashboard  --namespace=kube-system 
kubectl delete role kubernetes-dashboard-minimal --namespace=kube-system 
kubectl delete rolebinding kubernetes-dashboard-minimal --namespace=kube-system
kubectl delete sa kubernetes-dashboard --namespace=kube-system 
kubectl delete secret kubernetes-dashboard-certs --namespace=kube-system
kubectl delete secret kubernetes-dashboard-csrf --namespace=kube-system
kubectl delete secret kubernetes-dashboard-key-holder --namespace=kube-system

 创建相关凭证

# 创建用户
kubectl create serviceaccount dashboard-admin -n kube-system
# 用户授权
kubectl create clusterrolebinding dashboard-admin --clusterrole=cluster-admin --serviceaccount=kube-system:dashboard-admin
#获取用户Token
kubectl describe secrets -n kube-system $(kubectl -n kube-system get secret | awk '/dashboard-admin/{print $1}')

拿到token后登录 

授予匿名用户访问权限

kubectl create clusterrolebinding test:anonymous --clusterrole=dashboard-admin --user=system:anonymous

有效的解决办法（1.17）

kubectl create serviceaccount k8s-admin -n kubernetes-dashboard

kubectl create clusterrolebinding k8s-admin --clusterrole=cluster-admin --serviceaccount=kubernetes-dashboard:k8s-admin

kubectl get sa,secrets -n kubernetes-dashboard

kubectl describe secret k8s-admin-token-xxxx -n kubernetes-dashboard

#查看创建好的clusterrolebinding
kubectl get clusterrolebinding

 

安装dashborad过程中遇到的坑

如果是新版本的dashborad，默认会创建一个命名空间kubernetes-dashboard，但是访问会出现问题，

 解决：

删除原有命名空间下的secret

kubectl delete secret kubernetes-dashboard-certs -n kubernetes-dashboard

创建新的（如果是用kubeadm安装的，如果是二进制方式安装参考解决k8s Dashboard其他浏览器(火狐除外)不能访问_小科蜜666的博客-CSDN博客_k8s的dashboard页面访问不了）
kubectl create secret generic kubernetes-dashboard-certs \
--from-file=/etc/kubernetes/pki/apiserver.key --from-file=/etc/kubernetes/pki/apiserver.crt -n kubernetes-dashboard
修改dashboard.yaml 

重新访问后就有提示确认风险了

 

 

参考：

Kubernetes-v1.17集群安装dashboard_我的博客-CSDN博客_kubernetes 安装dashboard

​​​​​​https://segmentfault.com/a/1190000039805777

手把手从零搭建与运营生产级的 Kubernetes 集群与 KubeSphere_Kubernetes中文社区

centos8操作系统初始化设置_u013078871的博客-CSDN博客

Kubernetes-v1.17集群安装dashboard_我的博客-CSDN博客_kubernetes安装dashboard

Adsatrtgo
关注
专栏目录
Centos7使用kubeadm搭建k8s集群(一主两从--小白教程)
小石潭记丶
05-09 1153
下载地址:选择对应的版本即可，我下载的：CentOS-7-x86_64-DVD-2207-02.iso。
ubuntu使用kubeadm搭建k8s集群
小石潭记丶
07-09 1092
可能由于网络问题：链接: https://pan.baidu.com/s/1VoYMDB6ikOTSn4W-tziY9g 提取码: 3cvd。或者改为阿里云：registry.aliyuncs.com/google_containers/pause:3.9。k8s-node01 192.168.124.133 操作系统： Ubuntu20.04。k8s-node02 192.168.124.134 操作系统： Ubuntu20.04。最低配置：2核 2G内存 20G硬盘。
kubesphere安装部署附带Metrics server的安装
zsk_john的技术分享专用博客
08-31 2383
【代码】kubesphere安装部署（可离线部署）
服务账户service account在kubernetes1.24中的变化
老段工作室
07-07 1774
当创建pod时需要在pod里的.spec.serviceAccount指定pod以哪个service account运行，如果没有指定的话则默认使用default这个sa。不同版本的kubernetes在使用serviceaccount时是不一样的。
kubeadm部署k8s集群
最新发布
煤五千的博客
08-08 897
【代码】kubeadm部署k8s集群。
k8s学习-Secret（创建、使用、更新、删除等）
关注网络安全、云原生安全
08-20 9111
注意：Base64只是一种编码，不含密钥的，并不安全。任何拥有 API 访问权限的人都可以检索或修改 Secret，任何有权访问 etcd 的人也可以。此外，任何有权限在命名空间中创建 Pod 的人都可以使用该访问权限读取该命名空间中的任何 Secret；使用该 ServiceAccount 创建的任何 Pod 和默认使用该 ServiceAccount 的 Pod 将会将其的 imagePullSecret 字段设置为服务帐户的 imagePullSecret 值。中的安全部分详细展开。
Kubernetes — Dashboard
qq_41619571的博客
10-12 9422
参考文件： Kubectl Reference Docs (kubernetes.io) 配置对多集群的访问 | Kubernetes
外独立部署Prometheus+Grafana+Alertmanager监控K8S
听海归雪的博客
12-06 7646
集群外独立Prometheus+Grafana+Alertmanager服务监控k8s资源
使用kubeadm搭建k8s集群v1.23.1
08-05
使用kubeadm搭建k8s生产环境集群v1.23.1
使用kubeadm方式搭建K8S集群
RayPick的博客
06-30 238
kubeadm是官方社区推出的一个用于快速部署kubernetes集群的工具。 Kubeadm方式搭建K8S集群 使用kubeadm方式搭建K8s集群主要分为以下几步 准备三台虚拟机，同时安装操作系统CentOS 7.x 对三个安装之后的操作系统进行初始化操作 在三个节点安装 docker kubelet kubeadm kubectl 在master节点执行kubeadm init命令初始化 在node节点上执行 kubeadm join命令，把node节点添加到当前集群 配置CNI网络插件，用于节点之
k8s之基于kubeadm搭建k8s集群
wang0907的博客
01-09 701
你可能知道搭建k8s集群的kind，minikube工具，但是他们都太简单了，不能满足生产级的要求，想要真正的部署生产级别的k8s集群，我们还需要另外一个集群管理工具kubeadm,本文就一起看下如何使用该工具来搭建k8s集群。
k8s 二进制部署之 Node 组件部署
菜鸟厚非
08-17 7345
在 master 执行，将kubelet-bootstrap用户绑定到系统集群角色 kubectl create clusterrolebinding kubelet-bootstrap \ --clusterrole=system:node-bootstrapper \ --user=kubelet-bootstrap 创建kubeconfig文件 在master执行，在生成kubernetes证书的目录下执行以下命令生成kubeconfig文件： c47ffb939f5ca36231d9e31
kubeadm搭建
雪花凌落的盛夏
04-13 3252
一、kubeadm创建集群 请参照以前Docker安装。先提前为所有机器安装Docker 1、安装kubadm 一台兼容的 Linux 主机。Kubernetes 项目为基于 Debian 和 Red Hat 的 Linux 发行版以及一些不提供包管理器的发行版提供通用的指令 每台机器 2 GB 或更多的 RAM （如果少于这个数字将会影响你应用的运行内存) 2 CPU 核或更多 集群中的所有机器的网络彼此均能相互连接(公网和内网都可以) 设置防火墙放行规则 节点之中不可以有
Kubernetes之secrets使用
Harry的博客
10-11 3967
​ Secret解决了密码、token、密钥等敏感数据的配置问题，而不需要把这些敏感数据暴露到镜像或者Pod Spec中。Secret可以以Volume或者环境变量的方式使用。 ​
k8s 配置 Secret 集成Harbor
qq_34285557的博客
04-28 1774
本篇主要 记录一下 在 k8s 中如果想要 从 harbor拉取镜像 该怎么操作，以及介绍了一下 k8s 中 Secret 是什么 1.Secret 是什么 1.1 Secret 概述 Secret 是一种包含少量敏感信息例如密码、令牌或密钥的对象。 这样的信息可能会被放在 Pod 规约中或者镜像中。 使用 Secret 意味着你不需要在应用程序代码中包含机密数据。 由于创建 Secret 可以独立于使用它们的 Pod， 因此在创建、查看和编辑 Pod 的工作流程中暴露 Secret（及其数据...
Kubelet bootstrap认证配置步骤
weixin_34100227的博客
11-16 2846
kubelet 授权 kube-apiserver 的一些操作 exec run logs 等 RBAC 只需创建一次就可以 kubectl create clusterrolebinding kube-apiserver:kubelet-apis --clusterrole=system:kubelet-api-admin --user kubernetes   创建...
Kubernetes详解（四十一）——Secret创建
永远是少年
05-06 4799
今天继续给大家介绍Linux运维相关知识，本文主要内容是Secret创建。 一、--from-literal参数创建 二、--from-file参数创建 三、--from-env-file参数创建 四、清单创建
Clusterrolebindings 创建错误
热门推荐
知行合一 止于至善
07-29 1万+
这篇文章memo一下kubernetes的clusterrolebinding创建错误的问题确认过程。kubernetes从1.8之后将RBAC作为了缺省的认证方式，自然clusterrole和clusterrolebinding相关的操作也会越来越多，这篇文章以一个常见的粗心的错误来介绍一下对应的方法。
k8s日常故障收集
易拉罐子
01-09 5006
案例一： 1.8版本之前.开启rbac后,apiserver默认绑定system:nodes组到system:node的clusterrole。v1.8之后,此绑定默认不存在,需要手工绑定,否则kubelet启动后会报认证错误，使用kubectl get nodes查看无法成为Ready状态 Unable to register node &amp;quot;192.168.122.3&amp;quot; with API serv...
kubeadm搭建k8s集群实战教程: CentOS 7.5节点配置详解
本文档是一份关于使用kubeadm方式在CentOS 7.5系统上搭建Kubernetes (k8s) 集群的详细教程。作者亲自实践并验证了此过程，适用于k8s 1.19版本和Docker 19。以下是主要步骤和配置要点： 1. **环境配置**： - 集群...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值