sealer 自定义 k8s 镜像并部署高可用集群

最新推荐文章于 2024-05-09 12:41:23 发布
最新推荐文章于 2024-05-09 12:41:23 发布
阅读量1.8k 收藏 1
点赞数
文章标签： kubernetes docker 容器 云原生 运维
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_40212316/article/details/125539482
版权

sealer 可以自定义 k8s 镜像，想把一些 dashboard 或者 helm 包管理器打入 k8s 镜像，可以直用 sealer 来自定义。

sealer 部署的 k8s 高可用集群自带负载均衡。sealer 的集群高可用使用了轻量级的负载均衡 lvscare。相比其它负载均衡，lvscare 非常小仅有几百行代码，而且 lvscare 只做 ipvs 规则的守护，本身不做负载非常稳定，直接在 node 上监听 apiserver，如果跪了就移除对应的规则，重新起来之后会自动加回，相当于是一个专用的负载均衡器。

部署方式和 sealor 一样指定 master 节点和 node 节点。

1、下载并部署 sealer

Download and install sealer. Sealer is a binary tool of golang. You can download and unzip it directly to the bin directory, and the release page can also be downloaded
wget -c https://sealer.oss-cn-beijing.aliyuncs.com/sealer-latest.tar.gz && \
    tar -xvf sealer-latest.tar.gz -C /usr/bin

2、创建 kubefile 文件并编辑 (自定义构建 k8s 镜像需要会 dockerfile 的镜像命令)

touch kubefile

FROM registry.cn-qingdao.aliyuncs.com/sealer-io/kubernetes:v1.22.5  # k8s 版本自定义
COPY helm /usr/bin                                                  # 这个 helm 已经解压并把 helm 移动到 /root/ 目录下了
COPY kube-prometheus-0.11.0 .                                       # 这个版本可能不一样，解压出来的文件夹名字也不一样
COPY loki-stack-2.1.2.tgz .                                         # loki 这个可以用 helm 下载安装包
CMD kubectl apply -f kube-prometheus-0.11.0/manifests/setup
CMD kubectl apply -f kube-prometheus-0.11.0/manifests
CMD helm install loki loki-stack-2.1.2.tgz -n monitoring

3、构建

sealer build -t k8s:v1.22.5 .   # 构建镜像名字可以根据自己情况定义
2022-06-29 23:02:41 [INFO] [executor.go:123] start to check the middleware file
2022-06-29 23:02:41 [INFO] [executor.go:63] run build layer: COPY helm /usr/bin
2022-06-29 23:02:42 [INFO] [executor.go:63] run build layer: COPY kube-prometheus-0.11.0 .
2022-06-29 23:02:42 [INFO] [executor.go:63] run build layer: COPY loki-stack-2.1.2.tgz .
2022-06-29 23:02:42 [INFO] [executor.go:95] exec all build instructs success
2022-06-29 23:02:42 [WARN] [executor.go:112] no rootfs diff content found
2022-06-29 23:02:42 [INFO] [build.go:100] build image amd64 k8s:v1.22.5 success

4、查看镜像并部署

[root@master3 ~]# sealer images 
+---------------------------+------------------------------------------------------------------+-------+---------+---------------------+-----------+
|        IMAGE NAME         |                             IMAGE ID                             | ARCH  | VARIANT |       CREATE        |   SIZE    |
+---------------------------+------------------------------------------------------------------+-------+---------+---------------------+-----------+
| k8s:v1.22.5               | ef293898df6f5a9a01bd5bc5708820ef9ff25acfe56ea20cfe3a45a725f59bb5 | amd64 |         | 2022-06-29 23:02:42 | 1004.76MB |
| kubernetes:v1.22.5        | 46f8c423be130a508116f41cda013502094804525c1274bc84296b674fe17618 | amd64 |         | 2022-06-29 23:02:42 | 956.60MB  |
+---------------------------+------------------------------------------------------------------+-------+---------+---------------------+-----------+


sealer run k8s:v1.22.5 --masters 192.168.200.3,192.168.200.4,192.168.200.5 \
    --nodes 192.168.200.6 \
    --user root \
    --passwd admin

5、查看节点状态

[root@master3 ~]# kubectl get nodes
NAME      STATUS   ROLES    AGE   VERSION
master3   Ready    master   40h   v1.22.5
master4   Ready    master   40h   v1.22.5
master5   Ready    master   40h   v1.22.5
node6     Ready    <none>   40h   v1.22.5

查看所有 pod 状态

[root@master3 ~]# kubectl get po --all-namespaces -o wide 
NAMESPACE          NAME                                       READY   STATUS    RESTARTS   AGE   IP               NODE      NOMINATED NODE   READINESS GATES
calico-apiserver   calico-apiserver-57447598b7-46kbs          1/1     Running   5          40h   100.84.137.67    master5   <none>           <none>
calico-apiserver   calico-apiserver-57447598b7-hlws5          1/1     Running   2          40h   100.68.136.4     master3   <none>           <none>
calico-system      calico-kube-controllers-69dfd59986-tb496   1/1     Running   6          40h   100.125.38.209   node6     <none>           <none>
calico-system      calico-node-69dld                          1/1     Running   1          40h   192.168.200.6    node6     <none>           <none>
calico-system      calico-node-kdjzs                          1/1     Running   4          40h   192.168.200.3    master3   <none>           <none>
calico-system      calico-node-prktp                          1/1     Running   1          40h   192.168.200.5    master5   <none>           <none>
calico-system      calico-node-tm285                          1/1     Running   3          40h   192.168.200.4    master4   <none>           <none>
calico-system      calico-typha-779b5cfd4c-x4wnz              1/1     Running   2          40h   192.168.200.4    master4   <none>           <none>
calico-system      calico-typha-779b5cfd4c-zftxs              1/1     Running   1          40h   192.168.200.6    node6     <none>           <none>
kube-system        coredns-55bcc669d7-pvj45                   1/1     Running   2          40h   100.68.136.3     master3   <none>           <none>
kube-system        coredns-55bcc669d7-xkwvm                   1/1     Running   1          40h   100.84.137.68    master5   <none>           <none>
kube-system        etcd-master3                               1/1     Running   2          40h   192.168.200.3    master3   <none>           <none>
kube-system        etcd-master4                               1/1     Running   2          40h   192.168.200.4    master4   <none>           <none>
kube-system        etcd-master5                               1/1     Running   2          40h   192.168.200.5    master5   <none>           <none>
kube-system        kube-apiserver-master3                     1/1     Running   3          40h   192.168.200.3    master3   <none>           <none>
kube-system        kube-apiserver-master4                     1/1     Running   2          40h   192.168.200.4    master4   <none>           <none>
kube-system        kube-apiserver-master5                     1/1     Running   3          40h   192.168.200.5    master5   <none>           <none>
kube-system        kube-controller-manager-master3            1/1     Running   3          40h   192.168.200.3    master3   <none>           <none>
kube-system        kube-controller-manager-master4            1/1     Running   9          40h   192.168.200.4    master4   <none>           <none>
kube-system        kube-controller-manager-master5            1/1     Running   8          40h   192.168.200.5    master5   <none>           <none>
kube-system        kube-lvscare-node6                         1/1     Running   1          40h   192.168.200.6    node6     <none>           <none>
kube-system        kube-proxy-99cjb                           1/1     Running   1          40h   192.168.200.3    master3   <none>           <none>
kube-system        kube-proxy-lmdn6                           1/1     Running   1          40h   192.168.200.4    master4   <none>           <none>
kube-system        kube-proxy-ns9c5                           1/1     Running   1          40h   192.168.200.5    master5   <none>           <none>
kube-system        kube-proxy-xf6fx                           1/1     Running   1          40h   192.168.200.6    node6     <none>           <none>
kube-system        kube-scheduler-master3                     1/1     Running   4          40h   192.168.200.3    master3   <none>           <none>
kube-system        kube-scheduler-master4                     1/1     Running   5          40h   192.168.200.4    master4   <none>           <none>
kube-system        kube-scheduler-master5                     1/1     Running   7          40h   192.168.200.5    master5   <none>           <none>
monitoring         alertmanager-main-0                        2/2     Running   2          40h   100.125.38.210   node6     <none>           <none>
monitoring         alertmanager-main-1                        0/2     Pending   0          40h   <none>           <none>    <none>           <none>
monitoring         alertmanager-main-2                        0/2     Pending   0          40h   <none>           <none>    <none>           <none>
monitoring         blackbox-exporter-5c545d55d6-c8997         3/3     Running   3          40h   100.125.38.203   node6     <none>           <none>
monitoring         grafana-785db9984-xhrwx                    1/1     Running   1          40h   100.125.38.204   node6     <none>           <none>
monitoring         kube-state-metrics-54bd6b479c-jvt76        3/3     Running   3          40h   100.125.38.202   node6     <none>           <none>
monitoring         node-exporter-5hl54                        2/2     Running   2          40h   192.168.200.4    master4   <none>           <none>
monitoring         node-exporter-89jbp                        2/2     Running   2          40h   192.168.200.3    master3   <none>           <none>
monitoring         node-exporter-mqm4n                        2/2     Running   2          40h   192.168.200.6    node6     <none>           <none>
monitoring         node-exporter-mx6qr                        2/2     Running   2          40h   192.168.200.5    master5   <none>           <none>
monitoring         prometheus-adapter-7dbf69cc-65hp9          1/1     Running   1          40h   100.125.38.205   node6     <none>           <none>
monitoring         prometheus-adapter-7dbf69cc-xnjv4          1/1     Running   1          40h   100.125.38.207   node6     <none>           <none>
monitoring         prometheus-k8s-0                           2/2     Running   2          40h   100.125.38.208   node6     <none>           <none>
monitoring         prometheus-k8s-1                           0/2     Pending   0          40h   <none>           <none>    <none>           <none>
monitoring         prometheus-operator-54dd69bbf6-h5szm       2/2     Running   2          40h   100.125.38.206   node6     <none>           <none>
tigera-operator    tigera-operator-7cdb76dd8b-hfhrt           1/1     Running   9          40h   192.168.200.6    node6     <none>           <none>
Jacket Li
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
ali 开源sealer包 ，用于混合云搭建k8s
03-21
sealer4版本 是目前使用较多的版本
使用sealer-构建、交付、运行【kubernetes】-demo
privateobject的博客
07-05 1601
Kubernetes 是一个开源的容器编排引擎，用来对容器化应用进行自动化部署、 扩缩和管理. sealer把整个集群看成一台服务器，把kubernetes看成云操作系统，吸取docker设计精髓实现分布式软件镜像化构建、交付、运行 构建: 使用Kubefile定义整个集群所有依赖，把kubernetes 中间件 数据库和SaaS软件所有依赖打包到集群镜像中 交付: 像交付Docker镜像一样交付整个集群和集群中的分布式软件 运行: 一条命令......
【K8s】专题三（1）：Kubernetes 安装方法之 Sealer
最新发布
行者Sun1989的博客
05-09 609
Kubernetes 专题 - 安装方法之 Sealer
k8s小白安装
GCZ_START的博客
08-26 960
该错误可能是sealer版本0.8.6导致出现的，后来使用sealer 0.8.5版本恢复正常。
从零部署k8s以及系列配套组件安装之k8s安装（一）
m0_37986274的博客
05-17 744
k8s的超简易安装 二 安装rancher sudo docker run -d --restart=unless-stopped -p 80:80 -p 443:443 rancher/rancher
[docker]Sealer简介
农家小舍
02-25 1196
介绍了sealer的安装，集群镜像的构建与运行，以及对应的kubefile、clusterfile格式
使用sealos安装k8s时的工具
11-05
使用sealos安装k8s时的工具，在文章《快速搭建云原生开发环境（k8s+pv+prometheus+grafana）》中会用到
sealyun k8s kubernetes 1.13.4 自动化安装脚本
04-12
花了50大洋买的kubernetes自动化安装脚本，可一键安装k8s集群，生产可用！
构建共享并运行自定义kubernetes集群-Golang开发
05-26
Docker可以将操作系统的rootfs +应用程序构建到容器映像中...使用CloudImage，用户可以非常简单地实践云原生生态技术，例如：安装kubernetes集群：sealer run kubernetes：1.19.2＃在公共云服务器上运行kubernetes集群
filecoin-sealer
03-14
miner添加32GiB任务 curl -X POST \ -H“内容类型：application / json” \ --data'{“ jsonrpc”：“ 2.0”，“ method”：“ NSMINER.AddTask”，“ params”：[1012,1，“ PC1”，“ / root / miner_storage / t...
lvscare:轻巧的LVS婴​​儿护理，支持ipvs健康检查
05-06
LVScare 轻巧的LVS婴​​儿护理，支持ipvs健康检查 特征 如果ipvs真实服务器不可用，请将其删除，如果真实服务器恢复正常，则将其重新添加。 这对于kubernetes主HA很有用。 快速开始 lvscare care --run-once --vs 10.103.97.12:6443 --rs 192.168.0.2:6443 --rs 192.168.0.3:6443 --rs 192.168.0.4:6443 然后kubeadm join可以使用10.103.97.12:6443代替真正的大师。 在每个kubernetes节点上将lvscare作为静态pod运行。 lvscare care --vs 10.103.97.12:80 --rs 192.168.0.2:6443 --rs 192.168.0.3:6443 --rs 192.168.0.4:6443 --
sealer带你你玩转云原生生态软件
github_35614077的博客
07-14 971
sealer是阿里巴巴开源的一款集群镜像技术实现。可以把整个集群打成像docker镜像一样的镜像包，安装生态任何软件都可以sealer run xxx搞定，保障整个集群纬度的交付一致性。是专有云和离线交付利器，当然普通开发者可以用它来快速实践云原生生态软件，比如你要安装k8s 或者prometheus或者高可用的mysql都可以做到一键搞定。 与helm的区别是，helm只编排不打包，这很多helm国内环境下载镜像就是个问题，而sealer不存在这个问题，所有依赖都会被打包，而且整个集群整体打包。 | 用s
sealer，“集群”版本的 Docker，交付复杂度的终结者
Go中国
06-07 613
背景随着时代的发展，单机上跑的单体应用已经越来越少了，分布式应用几乎已经无处不在。Docker 很好的对单机应用进行了镜像化的封装，实现在单机上 Build Ship Run, 从此单机上应用的运行没有什么是一个 docker run 解决不了的。docker 对比 rpm 之类的工具显然一致性好很多，原因是 docker 把 rootfs 同样封装到了镜像之中，也就是所...
sealer实践
tianhouquan的专栏
05-20 1011
sealer
kubernetes（K8s）-sealos私有化部署完整指南
weixin_47758895的博客
08-21 2283
所有主机均要配置主机名、IP地址、主机名与IP地址解析。
sealer-阿里开源的实现像docker一样封装整个kubernetes集群
rendongxingzhe的博客
05-25 1031
概念 sealer可以像docker那样把整个集群制作成镜像，实现分布式软件的构建、交付、运行。 应用场景： kubernetes集群安装 kubernetes集群、数据库、中间件、SaaS应用整体打包，一键交付 离线交付，多架构支持，国产化支持 各种在kubernetes上编排的分布式应用交付 Clusterfile：用户自定义kubeadm，helm values 等配置的覆盖或合并，plugins，你可以覆盖或合并任何你想要的配置文件。像chart values、docke..
sealos快速部署k8s高可用集群
zoobi的博客
05-22 1216
sealos搭建k8s高可用集群。
62 k8s集群sealer安装
明日之星
02-26 310
【代码】62 k8s集群sealer安装。
sealer安装k8s
08-15
sealer是一种工具，用于在Kubernetes（K8s）集群中进行自动化部署和管理。它可以帮助用户简化K8s部署的过程，提供了一种快速、可靠的方式来安装和配置K8s集群。 首先，我们需要准备好运行K8s集群的机器。这些机器可以是物理服务器、虚拟机或云服务器。安装K8s所需的系统要求通常包括运行最新版本的Linux操作系统（如Ubuntu、CentOS等），具备足够的计算和存储资源，并且能够访问互联网。 接下来，我们可以下载和安装sealer工具。sealer是一个开源项目，可以在GitHub上找到它的源代码。我们可以将其克隆到本地，并按照官方文档提供的指南进行编译和安装。一旦安装完成，我们可以使用sealer提供的命令行界面来操作K8s集群。 在安装K8s之前，我们需要配置sealer的一些参数。这些参数包括K8s集群的节点数量、每个节点的IP地址、K8s版本、网络插件等。我们可以通过修改sealer的配置文件来进行这些配置，并确保每个参数都正确设置。 安装K8s之前，我们还需要安装Docker，因为Kubernetes依赖于Docker来运行容器。我们可以使用sealer提供的命令来安装和配置Docker，以确保它与Kubernetes兼容。 安装Kubernetes时，sealer会自动下载并配置所需的组件，如kube-apiserver、kube-controller-manager、kube-scheduler等。它还会为每个节点生成所需的证书和密钥，并将其配置到相应的文件中。 一旦安装完成，我们可以使用sealer提供的命令来验证K8s集群的状态，如查看节点、Pods等。我们还可以使用sealer来添加、删除和更新集群中的节点，以满足我们的需求。 总的来说，sealer是一个功能强大的工具，可以帮助我们简化Kubernetes的安装和管理。通过正确配置sealer并按照指南进行操作，我们可以轻松地搭建和维护一个高可用、可靠的Kubernetes集群。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值