Ubuntu安装k8s

已于 2023-06-01 13:48:05 修改
阅读量527 收藏 1
点赞数 2
分类专栏： 安装&配置 文章标签： kubernetes
于 2023-04-16 22:58:12 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_51507437/article/details/130189788
版权

虚拟机基础设置

修改虚拟机网络为桥接模式

换源

Ubuntu采用apt作为软件安装工具，其镜像源列表记录在/etc/apt/sources.list文件中。

首先将sources.list复制为sources.list.bak备份，然后将sources.list内容改为以下内容：

deb http://mirrors.aliyun.com/ubuntu/ jammy main restricted universe multiverse
deb http://mirrors.aliyun.com/ubuntu/ jammy-security main restricted universe multiverse
deb http://mirrors.aliyun.com/ubuntu/ jammy-updates main restricted universe multiverse
deb http://mirrors.aliyun.com/ubuntu/ jammy-backports main restricted universe multiverse
 
# deb-src http://mirrors.aliyun.com/ubuntu/ jammy main restricted universe multiverse
# deb-src http://mirrors.aliyun.com/ubuntu/ jammy-security main restricted universe multiverse
# deb-src http://mirrors.aliyun.com/ubuntu/ jammy-updates main restricted universe multiverse
# deb-src http://mirrors.aliyun.com/ubuntu/ jammy-backports main restricted universe multiverse
 
## Pre-released source, not recommended.
# deb http://mirrors.aliyun.com/ubuntu/ jammy-proposed main restricted universe multiverse
# deb-src http://mirrors.aliyun.com/ubuntu/ jammy-proposed main restricted universe multiverse
 
deb https://mirrors.tuna.tsinghua.edu.cn/ubuntu/ jammy main restricted universe multiverse
deb https://mirrors.tuna.tsinghua.edu.cn/ubuntu/ jammy-updates main restricted universe multiverse
deb https://mirrors.tuna.tsinghua.edu.cn/ubuntu/ jammy-backports main restricted universe multiverse
deb https://mirrors.tuna.tsinghua.edu.cn/ubuntu/ jammy-security main restricted universe multiverse
 
# deb-src https://mirrors.tuna.tsinghua.edu.cn/ubuntu/ jammy main restricted universe multiverse
# deb-src https://mirrors.tuna.tsinghua.edu.cn/ubuntu/ jammy-updates main restricted universe multiverse
# deb-src https://mirrors.tuna.tsinghua.edu.cn/ubuntu/ jammy-backports main restricted universe multiverse
# deb-src https://mirrors.tuna.tsinghua.edu.cn/ubuntu/ jammy-security main restricted universe multiverse
 
## Pre-released source, not recommended.
# deb https://mirrors.tuna.tsinghua.edu.cn/ubuntu/ jammy-proposed main restricted universe multiverse
# deb-src https://mirrors.tuna.tsinghua.edu.cn/ubuntu/ jammy-proposed main restricted universe multiverse
 
## Pre-released source, not recommended.
# deb https://mirrors.ustc.edu.cn/ubuntu/ jammy-proposed main restricted universe multiverse
# deb-src https://mirrors.ustc.edu.cn/ubuntu/ jammy-proposed main restricted universe multiverse
 
deb http://mirrors.163.com/ubuntu/ jammy main restricted universe multiverse
deb http://mirrors.163.com/ubuntu/ jammy-security main restricted universe multiverse
deb http://mirrors.163.com/ubuntu/ jammy-updates main restricted universe multiverse
deb http://mirrors.163.com/ubuntu/ jammy-backports main restricted universe multiverse
 
# deb-src http://mirrors.163.com/ubuntu/ jammy main restricted universe multiverse
# deb-src http://mirrors.163.com/ubuntu/ jammy-security main restricted universe multiverse
# deb-src http://mirrors.163.com/ubuntu/ jammy-updates main restricted universe multiverse
# deb-src http://mirrors.163.com/ubuntu/ jammy-backports main restricted universe multiverse
 
## Pre-released source, not recommended.
# deb http://mirrors.163.com/ubuntu/ jammy-proposed main restricted universe multiverse
# deb-src http://mirrors.163.com/ubuntu/ jammy-proposed main restricted universe multiverse

最后更新一下即可

sudo apt update

设置主机名

master节点

sudo hostnamectl set-hostname master

其他节点

sudo hostnamectl set-hostname node1
sudo hostnamectl set-hostname node2

注：使用 hostnamectl 命令修改的主机名会被永久修改，保存到文件中，并且不需要重启系统就会生效。

配置静态ip

各个节点都要设置，下面以master为例

在这里插入图片描述

时间同步

sudo apt install ntp
systemctl start ntp
systemctl enable ntp

安装ssh

sudo apt update
sudo apt install openssh-server
sudo systemctl status ssh

安装好ssh后可以用Xshell软件连接，直接在物理机中使用，免去了频繁切换的麻烦。

Ubuntu系统设置

禁用swap

在Linux下，SWAP的作用类似Windows系统下的“虚拟内存”。当物理内存不足时，拿出部分硬盘空间当SWAP分区（虚拟成内存）使用，从而解决内存容量不足的情况。

SWAP意思是交换，顾名思义，当某进程向OS请求内存发现不足时，OS会把内存中暂时不用的数据交换出去，放在SWAP分区中，这个过程称为SWAP OUT。当某进程又需要这些数据且OS发现还有空闲物理内存时，又会把SWAP分区中的数据交换回物理内存中，这个过程称为SWAP IN。

当然，swap大小是有上限的，一旦swap使用完，操作系统会触发OOM-Killer机制，把消耗内存最多的进程kill掉以释放内存。

Swap会导致docker的运行不正常，性能下降，是个bug，但是后来关闭swap就解决了，就变成了通用方案。

sudo swapoff -a
sudo sed -i '/ swap / s/^/#/' /etc/fstab

这步之后，最好重启ubuntu系统保证修改生效。

修改内核参数

载入如下内核模块

sudo tee /etc/modules-load.d/containerd.conf <<EOF
overlay
br_netfilter
EOF

sudo modprobe overlay
sudo modprobe br_netfilter

配置下面的网络参数：

sudo tee /etc/sysctl.d/kubernetes.conf <<EOF
net.bridge.bridge-nf-call-ip6tables = 1
net.bridge.bridge-nf-call-iptables = 1
net.ipv4.ip_forward = 1
EOF

运行下面的command使改动生效：

sudo sysctl --system

开启ipvs

在kubernetes中service有两种代理模型，一种是基于iptables（链表），另一种是基于ipvs（hash表）。ipvs的性能要高于iptables的，但是如果要使用它，需要手动载入ipvs模块。

（1）安装ipset和ipvsadm

apt install -y ipset ipvsadm

（2）配置加载模块

cat > /etc/modules-load.d/ipvs.conf << EOF
modprobe -- ip_vs
modprobe -- ip_vs_rr
modprobe -- ip_vs_wrr
modprobe -- ip_vs_sh
modprobe -- nf_conntrack
EOF

（3）临时加载

modprobe -- ip_vs
modprobe -- ip_vs_rr
modprobe -- ip_vs_wrr
modprobe -- ip_vs_sh

（4）开机加载配置，将ipvs相关模块加入配置文件中

cat >> /etc/modules <<EOF
ip_vs_sh
ip_vs_wrr
ip_vs_rr
ip_vs
nf_conntrack
EOF

安装containerd

containerd是容器虚拟化技术，从docker中剥离出来，形成开放容器接口（OCI）标准的一部分。

在这里插入图片描述

docker对容器的管理和操作基本都是通过containerd完成的。Containerd 是一个工业级标准的容器运行时，它强调简单性、健壮性和可移植性。Containerd 可以在宿主机中管理完整的容器生命周期：容器镜像的传输和存储、容器的执行和管理、存储和网络等。详细点说，Containerd 负责干下面这些事情：

  • 管理容器的生命周期(从创建容器到销毁容器)
  • 拉取/推送容器镜像
  • 存储管理(管理镜像及容器数据的存储)
  • 调用 runC 运行容器(与 runC 等容器运行时交互)
  • 管理容器网络接口及网络

具体安装步骤如下：

（1）安装dependencies

sudo apt install -y curl gnupg2 software-properties-common apt-transport-https ca-certificates

（2）添加阿里云containerd镜像

curl -fsSL https://mirrors.aliyun.com/docker-ce/linux/ubuntu/gpg | apt-key add -
sudo add-apt-repository "deb [arch=amd64] https://mirrors.aliyun.com/docker-ce/linux/ubuntu $(lsb_release -cs) stable"

（3）安装containerd

sudo apt update
sudo apt install -y containerd.io

（4）配置containerd使用systemd作为cgroup

containerd config default | sudo tee /etc/containerd/config.toml >/dev/null 2>&1
sudo sed -i 's/SystemdCgroup \= false/SystemdCgroup \= true/g' /etc/containerd/config.toml

（5）接着修改/etc/containerd/config.toml配置文件，如果没有该配置文件，可以用命令containerd config default > /etc/containerd/config.toml创建。将配置文件中的sandbox_image 镜像源设置为阿里云 google_containers 镜像源（所有节点）registry.aliyuncs.com/google_containers/pause

如下图所示

在这里插入图片描述

等效的shell命令如下

sed -i '/sandbox_image/s/registry\.k8s\.io\/pause/registry\.aliyuncs\.com\/google_containers\/pause/' /etc/containerd/config.toml

（6）添加 endpoint加速器

sed -i '/registry.mirrors]/a\ \ \ \ \ \ \ \ [plugins."io.containerd.grpc.v1.cri".registry.mirrors."docker.io"]' /etc/containerd/config.toml
sed -i '/registry.mirrors."docker.io"]/a\ \ \ \ \ \ \ \ \ \ endpoint = ["https://xd8h18qb.mirror.aliyuncs.com"]' /etc/containerd/config.toml

（7）重启并设置开机自启

sudo systemctl daemon-reload
sudo systemctl restart containerd
sudo systemctl enable containerd

安装Kubernetes组件

添加apt存储库

执行以下命令为 Kubernetes 添加 apt 存储库

curl -s https://packages.cloud.google.com/apt/doc/apt-key.gpg | sudo apt-key add -
sudo apt-add-repository "deb http://apt.kubernetes.io/ kubernetes-jammy main"

如果有如下爆错

在这里插入图片描述

说明上面那个谷歌的源用不了，就用下面的阿里云的源

# 替换成阿里云
curl https://mirrors.aliyun.com/kubernetes/apt/doc/apt-key.gpg | apt-key add -
sudo apt-add-repository "deb https://mirrors.aliyun.com/kubernetes/apt kubernetes-xenial main"

安装Kubectl, kubeadm & kubelet

sudo apt update
sudo apt install -y kubelet=1.26.0-00 kubeadm=1.26.0-00 kubectl=1.26.0-00
sudo apt-mark hold kubelet kubeadm kubectl

apt-mark 用于将软件包标记/取消标记为自动安装。 hold 选项用于将软件包标记为保留，以防止软件包被自动安装、升级或删除。这里主要是为了防止kubelet等组件自动升级。

这里指定版本是我为了后续装dashboard版本匹配。1.26.0的版本目前还是很新的，如果想装最新的，把版本号去掉即可。后续配图中的版本号会和此处的版本不一致，为了记录安装过程，我也是装了好几次，截图的时候是在另一次安装中截的，知道大概流程即可，不必过于纠结。

设置crictl

cat > /etc/crictl.yaml << EOF
runtime-endpoint: unix:///var/run/containerd/containerd.sock
image-endpoint: unix:///var/run/containerd/containerd.sock
timeout: 10 
debug: false
EOF

初始化Master节点

在各节点开机启动kubelet服务

systemctl enable kubelet.service

使用kubeadm config print init-defaults 可以打印集群初始化默认的使用的配置，其中有一些需要修改的配置项：

apiVersion: kubeadm.k8s.io/v1beta3
bootstrapTokens:
- groups:
  - system:bootstrappers:kubeadm:default-node-token
  token: abcdef.0123456789abcdef
  ttl: 24h0m0s
  usages:
  - signing
  - authentication
kind: InitConfiguration
localAPIEndpoint:
  advertiseAddress: 1.2.3.4     #需要替换master节点IP
  bindPort: 6443
nodeRegistration:
  criSocket: unix:///var/run/containerd/containerd.sock
  imagePullPolicy: IfNotPresent
  name: node
  taints: null
---
apiServer:
  timeoutForControlPlane: 4m0s
apiVersion: kubeadm.k8s.io/v1beta3
certificatesDir: /etc/kubernetes/pki
clusterName: kubernetes
controllerManager: {}
dns: {}
etcd:
  local:
    dataDir: /var/lib/etcd
imageRepository: registry.k8s.io  #这个源要换成阿里的！registry.aliyuncs.com/google_containers
kind: ClusterConfiguration
kubernetesVersion: 1.26.0
networking:
  dnsDomain: cluster.local
  podSubnet: 10.244.0.0/16  #增加该字段，用于指定pod的网段
  serviceSubnet: 10.96.0.0/12
scheduler: {}
# 下面都是新增的
---
# 使用ipvs
apiVersion: kubeproxy.config.k8s.io/v1alpha1
kind: KubeProxyConfiguration
mode: ipvs
---
# 指定cgroup
apiVersion: kubelet.config.k8s.io/v1beta1
kind: KubeletConfiguration
cgroupDriver: systemd

使用命令将默认配置保存为一个yaml文件

kubeadm config print init-defaults > init-config.yaml

然后用vim修改好配置项，在开始初始化集群之前可以预先在各个服务器节点上拉取k8s需要的容器镜像。

kubeadm config images pull --config init-config.yaml  #提前拉取镜像

接下来正式初始化

kubeadm init --config init-config.yaml

如果不想使用配置文件的话，可以用下面这条命令：

kubeadm init --apiserver-advertise-address=<master的ip地址> --image-repository=registry.aliyuncs.com/google_containers --pod-network-cidr=10.244.0.0/16

当看到如下的输出时，说明系统master节点初始化完成。

在这里插入图片描述

注意：如果kubernets初始化时失败后，第二次再次执行会初始化命令会报错，这时需要进行重置

kubeadm reset

接着按照提示信息，进行后续的初始化工作：

mkdir -p $HOME/.kube
sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
sudo chown $(id -u):$(id -g) $HOME/.kube/config

完成上面的工作之后，可以尝试运行下面的command来查看当前集群的状态：

kubectl cluster-info
kubectl get nodes

输出类似如下

在这里插入图片描述

加入Node节点

在master节点的初始化输出的最下面，会列出node节点加入的command，直接copy然后到每个node节点运行即可。下面是我的机器的例子，得换成实际的command

kubeadm join 192.168.31.209:6443 --token abcdef.0123456789abcdef \
	--discovery-token-ca-cert-hash sha256:ee713d98083f6ba56e31f4d246a0f537e78bc02e0dbc790652f629adf7e3bcfe

token的有效期是24h，如果过期了需要重新生成token，可以使用如下命令：

kubeadm token create --print-join-command

然后copy到node节点运行即可。当然，也可以用--ttl 0参数来产生一个永不过期的token。另外，使用kubeadm token list命令可以列出当前有效的token列表。

加入成功之后，可以查看当前集群的node状态，此时由于没有安装网络相关插件，所有节点处于NotReady的状态。下一步会进行安装。

kubectl get nodes

在这里插入图片描述

配置集群网络

一般可以安装Calico、Flannel和Weave-net等插件，这里选择使用flannel。如果想用Calico可以参考官方文档，上面也有安装教程。

kubectl apply -f https://github.com/flannel-io/flannel/releases/latest/download/kube-flannel.yml

如果连接失败可以科学上网，先去把yaml文件下载下来，再拖进Ubuntu里apply。运行结果大致如下：

在这里插入图片描述

此时可以查看系统namespace下的所有基础组件的运行情况：

kubectl get pods -n kube-system

在这里插入图片描述

接下来检查节点状态：

kubectl get nodes

在这里插入图片描述

至此，整个k8s集群搭建完毕。

若在配置完Flannel后，有新节点加入集群，在master节点上get nodes会显示not ready，具体解决方案如下：

（1）查取正常集群节点所使用网段

cat /run/flannel/subnet.env

在这里插入图片描述

（2）在新节点上创建cni网络相关配置文件

mkdir -p /etc/cni/net.d/
cat <<EOF> /etc/cni/net.d/10-flannel.conf
{"name":"cbr0","type":"flannel","delegate": {"isDefaultGateway": true}}
EOF
mkdir /usr/share/oci-umount/oci-umount.d -p
mkdir /run/flannel/
cat <<EOF> /run/flannel/subnet.env
FLANNEL_NETWORK=10.244.0.0/16
FLANNEL_SUBNET=10.244.1.0/24
FLANNEL_MTU=1450
FLANNEL_IPMASQ=true
EOF

其中subnet.env的内容要根据上一步中查到的进行修改。

（3）然后重新查询node状态，已经变成ready了。

h0l10w
关注
  • 2
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 1
    评论
专栏目录
Ubuntu 安装k8s集群
m0_60028455的博客
07-14 7477
镜像下载、域名解析、时间同步请点击 阿里云开源镜像站 前言 本文介绍如何在ubuntu上部署k8s集群，大致可以分为如下几个步骤 修改ubuntu配置 安装docker 安装kubeadm、kubectl以及kubelet 配置master节点 将slave节点加入网络 因为k8s分为管理节点和工作节点，所以我们将要 在master上部署管理节点，在worker上部署工作节点，master和worker节点信息如下 主机名：master，主机IP：192.168.56.11，版本：Ubuntu serv
k8s安装——ubuntu
流夏_
06-23 1万+
本次安装的docker和k8s版本为：ubuntu -v20.04k8s -v1.23.1主机内网地址说明47.200.162.6172.31.186.226master节点，能连外网，至少2核CPU，2G内存47.200.168.250172.31.186.227node节点，能连外网，至少2核CPU，2G内存 三、设置k8s环境准备条件（所有机器） 四、安装与配置k8s 1 安装 kubelet kubeadm kubectl（master上执行） 安装如果报错的话
ubuntu20.04安装k8s
professorman的博客
06-23 1万+
环境初始化 #关闭swap swapoff -a rm -f /swap.img vim /etc/fstab # /swap.img #开启ip转发 vim /etc/sysctl.conf net.ipv4.ip_forward=1 #查看状态 sysctl -p 安装docker step1:安装依赖 sudo apt-get update sudo apt-get -y install apt-transport-https ca-certificates curl software-prop
ubuntu 安装 k8s
ansinjay的专栏
09-09 2508
前言 本文介绍如何在ubuntu上部署k8s集群，大致可以分为如下几个步骤： 修改ubuntu配置 安装docker 安装kubeadm、kubectl以及kubelet 初始化master节点 将slave节点加入网络 如果你对上面的某些名字感到陌生，没关系，下文会一一进行讲解，如果你想先了解一下 docker 和 k8s，可以参考 10分钟看懂Docker和K8S。好了，在正式开始之前，首先看一下我们都有哪些服务器，如果你对如何组建如下虚拟机网络感兴趣的话，可以参考 virtualbox 虚
Ubuntu18.04部署k8s
Hi~ o(*￣▽￣*)ブ
11-26 4013
Ubuntu18.04 https://github.com/qxl1231/2019-k8s-centos 1.安装Docker(以Ubuntu为例) # step 1: 安装必要的一些系统工具 sudo apt-get update sudo apt-get -y install apt-transport-https ca-certificates curl software-properties-common # step 2: 安装GPG证书 curl -fsSL http://mi
k8s离线文件包 Ubuntu 使用Kubeadm 离线安装k8s
10-12
k8s离线文件包 Ubuntu 使用Kubeadm 离线安装k8s 参考连接 https://blog.csdn.net/u010952056/article/details/127276191?spm=1001.2014.3001.5501
Ubuntu下docker+k8s的安装
11-21
基于Ubuntu14.04进行docker+k8s的安装，经测试也适用于Ubuntu的更高版本
centos7与ubuntu搭建k8s集群方案
01-31
centos7与ubuntu搭建k8s集群方案，包含了在k8s中搭建的各种常用微服务与存储。
k8s 安装教程 一键安装脚本
01-28
支持Ubuntu_16_64,CentOS_7_64,Debian_9_64， k8s集群半离线安装，一键脚本安装， docker 建议版本：docker-ce-17.03.2
ubuntu一键部署k8s 1.23.9版本
02-02
ubuntu用的20.04版本。版本影响应该不大
k8s ubuntu 系统的搭建及运用
07-30
本人在项目过程中，搭建的K8s集群，可能有去区别其他的实际情况，文档描述了本人遇到的坑，发出来共享，不喜勿喷，谢谢
详解 K8S 高可用部署
油墨香^-^的博客
12-05 1895
一、前言二、基础环境部署1）前期准备（所有节点）2）安装容器 docker（所有节点）3）配置 k8s yum 源（所有节点）4）将 sandbox_image 镜像源设置为阿里云 google_containers 镜像源（所有节点）5）配置 containerd cgroup 驱动程序 systemd（所有节点）6）开始安装 kubeadm，kubelet 和 kubectl（master 节点）7）使用 kubeadm 初始化集群（master 节点）8）安装 Pod 网络插件（CNI：Contain
使用kubeadm部署kubernetes 1.24.3
热门推荐
soliso
11-07 1万+
使用kubeadm部署kubernetes 1.24.3
kubelet 创建pod流程（代码图解+日志说明）
plchenliang的博客
09-25 3317
本文重点介绍kubelet创建pod相关流程，通过梳理代码及实战查看日志，来说明kubelet创建pod的重点步骤
本地k8s集群搭建保姆级教程(2)-装机Alpine
人生苦短，我用... ...
06-04 1757
本地k8s集群搭建保姆级教程(1)-安装Alpine
【kubernetes学习】使用kubeadm安装部署单master节点kubernetes
qq_32273329的博客
05-08 544
该实验使用对应Kubeadm 部署工具快速安装 Kubernetes。环境信息清单：（先部署 1master 和 2node 节点，后面再加一个 master 节点）
基于containerd部署kubernetes v1.20.4
惊云
03-08 1896
本次集群部署采用的容器技术是containerd 系统版本：CentOs8.1 k8s版本：v1.20.4 containerd版本：ctr containerd.io 1.4.3 master: 192.168.43.151 node1: 192.168.43.152 node2: 192.168.43.153 1、初始化配置 #下载CentOS 8的repo文件（用阿里的） curl -o /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyu
containerd拉取私库镜像失败(kubelet)
企鹅菜鸟的成长过程
07-26 6802
最近在跟着高塔老师的教程用二进制的方式搭建k8skubernetesv1.20.0我没有使用最新的版本，是因为内部网络问题。containerdv1.5.2之前并没有使用过，但对docker比较熟悉我所处的环境是一个内网环境，无法连接互联网，更无法连接国际互联网，内网环境下部署了Harbor(privateregistry)，用作镜像仓库来使用，是以http形式来进行服务的，即insecureregistry，ip地址为192.168.1.8第一个问题。...
ubuntu22.04安装k8s集群(cri-docker+haproxy+keepalived)
最新发布
SeeYouGoodBye的专栏
01-19 1651
使用haproxy和keeplived搭建高可用的多主K8s集群
ubuntu安装k8s
08-25
- *2* *3* [Ubuntu下k8s安装教程](https://blog.csdn.net/qq_35720307/article/details/87724172)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

h0l10w

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值