kubernetes容灾备份工具velero

最新推荐文章于 2024-07-19 14:54:37 发布
最新推荐文章于 2024-07-19 14:54:37 发布
阅读量2k 收藏 17
点赞数 3
分类专栏： kubernetes 文章标签： kubernetes
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/networken/article/details/120368546
版权

velero 简介

Velero 是一个云原生的灾难恢复和迁移工具，采用 Go 语言编写，可以安全的备份、恢复和迁移Kubernetes集群资源和持久卷。Velero 是西班牙语，意思是帆船，非常符合 Kubernetes 社区的命名风格。
在这里插入图片描述
Velero目前包含以下特性：

  • 支持Kubernetes集群数据备份和恢复
  • 支持复制当前Kubernetes集群的资源到其它Kubernetes集群
  • 支持复制生产环境到开发以及测试环境

Velero组件一共分两部分，分别是服务端和客户端。

  • 服务端：运行在Kubernetes集群中
  • 客户端：运行在本地的velero命令行工具，需要在机器上已配置好kubectl及集群kubeconfig

velero使用场景

  • 灾备场景：提供备份恢复k8s集群的能力
  • 迁移场景：提供拷贝集群资源到其他集群的能力（复制同步开发，测试，生产环境的集群配置，简化环境配置）

velero与etcd备份区别

  • 直接备份 Etcd 是将集群的全部资源备份起来，而 Velero 可以对 Kubernetes 集群内对象级别进行备份。
  • 除了对 Kubernetes 集群进行整体备份外，Velero 还可以通过对 Type、Namespace、Label
    等对象进行分类备份或者恢复。

官方网站：https://velero.io

项目地址：https://github.com/vmware-tanzu/velero

velero 原理

每个 Velero 操作包括按需备份、计划备份、恢复，都是一个自定义资源，使用 Kubernetes自定义资源定义 (CRD) 定义并存储在etcd 中。Velero 还包括处理自定义资源以执行备份、恢复和所有相关操作的控制器。
在这里插入图片描述
Velero 在 Kubernetes 集群中创建了很多 CRD 以及相关的控制器，进行备份恢复等操作实质上是对相关 CRD 的操作。

# kubectl -n velero get crds -l component=velero
NAME                                CREATED AT
backups.velero.io                   2021-08-06T08:29:34Z
backupstoragelocations.velero.io    2021-08-06T08:29:34Z
deletebackuprequests.velero.io      2021-08-06T08:29:34Z
downloadrequests.velero.io          2021-08-06T08:29:34Z
podvolumebackups.velero.io          2021-08-06T08:29:34Z
podvolumerestores.velero.io         2021-08-06T08:29:34Z
resticrepositories.velero.io        2021-08-06T08:29:34Z
restores.velero.io                  2021-08-06T08:29:34Z
schedules.velero.io                 2021-08-06T08:29:34Z
serverstatusrequests.velero.io      2021-08-06T08:29:35Z
volumesnapshotlocations.velero.io   2021-08-06T08:29:35Z

您可以备份或恢复集群中的所有对象，也可以按类型、命名空间和/或标签过滤对象。Velero 非常适合灾难恢复用例，以及在集群上执行系统操作（如升级）之前对应用程序状态进行快照。

Velero 工作原理图如下图所示，当用户执行备份命令时，备份过程说明如下：

  1. 调用自定义资源 API 创建备份对象（1）。
  2. BackupController 控制器检测到生成的备份对象时（2）执行备份操作（3）。
  3. 将备份的集群资源和存储卷快照上传到 Velero 的后端存储（4）和（5）。
    在这里插入图片描述

Velero 将对象存储视为事实的来源，当执行还原操作时，Velero 会将指定备份对象的数据从后端存储同步到 Kubernetes 集群完成还原工作。同样，如果一个备份对象存在于 Kubernetes 但不在对象存储中，它将从 Kubernetes 中删除，因为备份 tarball 不再存在。
在这里插入图片描述

velero 安装

velero安装分为两部分，velero CLI命令行安装及服务端安装，前提条件：

  • 准备一个生产k8s集群cluster1，及一个灾备k8s集群cluster2，当然也可以在同一个集群备份恢复
  • 在灾备环境部署minio对象存储，当然也可以使用公有云对象存储

minio对象存储安装

velero依赖对象存储保存备份数据，这里部署minio替代公有云对象存储。灾备环境准备一个节点部署minio对象存储，两个集群velero服务端将指向同一个对象存储的同一个bucket，cluster1向桶内备份数据，cluster2向桶内读取备份数据进行恢复，借鉴下图进行理解：
在这里插入图片描述
可以在k8s集群内直接使用yaml或官方minio operator部署，这里在集群外使用docker安装minio对象存储：

docker run -d --name minio \
  --restart always \
  -p 9000:9000 \
  -p 9001:9001 \
  -e "MINIO_ROOT_USER=minio" \
  -e "MINIO_ROOT_PASSWORD=minio123" \
  -v minio-data:/data \
  minio/minio server /data --console-address ":9001"

访问对象存储控制台http://prod.minio.cloudcele.com:9001，创建名为velero的bucket桶，名称自定义：
在这里插入图片描述

安装velero CLI客户端

参考：https://velero.io/docs/v1.6/basic-install/

分别在cluster1和cluster2准备一个节点，安装veleroCLI，本地有kubeconfig文件，能够访问到两个k8s集群即可：

下载客户端

wget https://github.com/vmware-tanzu/velero/releases/download/v1.6.2/velero-v1.6.2-linux-amd64.tar.gz

解压安装

tar -zxvf velero-v1.6.2-linux-amd64.tar.gz 
cp velero-v1.6.2-linux-amd64/velero /usr/local/bin/

查看velero CLI版本

velero version

安装velero服务端

参考：https://velero.io/docs/v1.6/contributions/minio/

分别在cluster1和cluster2集群中部署velero服务端，本地创建minio对象存储访问凭证：

cat  >credentials-velero <<EOF
[default]
aws_access_key_id = minio
aws_secret_access_key = minio123
EOF

使用velero CLI在生产和灾备集群安装velero，指向同一个对象存储：

velero install \
    --provider aws \
    --plugins velero/velero-plugin-for-aws:v1.2.0 \
    --namespace velero \
    --bucket velerobak \
    --default-volumes-to-restic \
    --use-restic \
    --secret-file ./credentials-velero \
    --use-volume-snapshots=false \
    --backup-location-config region=minio,s3ForcePathStyle="true",s3Url=http://192.168.0.21:9000

该--use-restic参数指定使用官方默认支持的restic将持久化卷备份到对象存储，而公有云厂商提供的k8s有对应的CSI实现和velero插件支持。

查看集群中创建的pods

[root@master ~]# kubectl -n velero get pods
NAME                      READY   STATUS    RESTARTS   AGE
restic-22m9g              1/1     Running   2          16m
restic-4rb8r              1/1     Running   2          16m
restic-k8b75              1/1     Running   1          16m
restic-p88xh              1/1     Running   0          16m
velero-79dc999699-rjf9p   1/1     Running   1          16m

或者使用helm部署velero（不推荐）：

helm repo add vmware-tanzu https://vmware-tanzu.github.io/helm-charts

helm install velero vmware-tanzu/velero \
  --namespace velero \
  --create-namespace \
  --set cleanUpCRDs=true \
  --set configuration.provider=aws \
  --set-file credentials.secretContents.cloud=./credentials \
  --set deployRestic=true \
  --set snapshotsEnabled=false \
  --set configuration.backupStorageLocation.name=minio \
  --set configuration.backupStorageLocation.bucket=velero \
  --set configuration.backupStorageLocation.config.region=minio \
  --set configuration.backupStorageLocation.config.s3ForcePathStyle=true \
  --set configuration.backupStorageLocation.config.s3Url=http://192.168.0.21:9000 \
  --set "initContainers[0].name"=velero-plugin-for-aws \
  --set "initContainers[0].image"=velero/velero-plugin-for-aws:v1.2.0 \
  --set "initContainers[0].volumeMounts[0].mountPath"=/target \
  --set "initContainers[0].volumeMounts[0].name"=plugins \
  vmware-tanzu/velero

卸载velero

kubectl delete namespace/velero clusterrolebinding/velero
kubectl delete crds -l component=velero

velero备份

在cluster1备份应用及pv卷，首先创建veleroCLI中自带的示例应用：

cd velero-v1.6.2-linux-amd64/examples/nginx-app

kubectl apply -f with-pv.yaml

查看创建的应用及持久卷，注意这里使用storageclass动态申请持久卷，在恢复的目标集群，建议提供相同名称的storageclass:

[root@product-cluster nginx-app]# kubectl -n nginx-example get pods
NAME                                READY   STATUS    RESTARTS   AGE
nginx-deployment-5ccc99bffb-swvr2   2/2     Running   0          6m59s

[root@product-cluster nginx-app]# kubectl -n nginx-example get pv
NAME                                       CAPACITY   ACCESS MODES   RECLAIM POLICY   STATUS   CLAIM                      STORAGECLASS   REASON   AGE
pvc-fd5eee69-ca7f-4e94-a749-7d4e04dc4a7c   50Mi       RWO            Delete           Bound    nginx-example/nginx-logs   longhorn                6m54s

执行备份，备份nginx-example这个命名空间下的所有资源：

velero backup create mybackup-01 --include-namespaces=nginx-example

查看备份百分比进度

velero backup describe mybackup-01

查看备份的所有资源列表

velero backup describe mybackup-01 --details

备份完成后可以查看备份日志

velero backup logs mybackup-01

查看备份任务最终执行状态

velero backup get

查看对象存储中保存的备份数据
在这里插入图片描述

velero恢复

由于指向同一个对象存储，cluster2中的velero同样能看到cluster1中备份：

[root@disaster-cluster ~]# velero backup get
NAME                               STATUS            ERRORS   WARNINGS   CREATED                         EXPIRES   STORAGE LOCATION   SELECTOR
mybackup-01                        Completed         0        1          2021-09-18 17:48:24 +0800 CST   29d       default            <none>

在集群cluster2恢复应用及pv卷：

[root@disaster-cluster ~]# velero restore create --from-backup=mybackup-01

查看恢复的应用及数据

[root@disaster-cluster ~]# kubectl -n nginx-example get pods
NAME                                READY   STATUS    RESTARTS   AGE
nginx-deployment-5ccc99bffb-swvr2   2/2     Running   0          7m10s

[root@disaster-cluster ~]# kubectl -n nginx-example get pv
NAME                                       CAPACITY   ACCESS MODES   RECLAIM POLICY   STATUS   CLAIM                      STORAGECLASS   REASON   AGE
pvc-c9713a25-a3f6-4179-89df-fd6e27ea5055   5Gi        RWO            Delete           Bound    ns-panda/mysql-pv-claim    longhorn                31h

velero常用命令

备份单个namespace下的所有资源：

velero backup create mybackup-01 --include-namespaces=mynamespace

备份多个namespace下的所有资源：

velero backup create mybackup --include-namespaces=mynamespaceA,mynamespaceB

创建一小时后自动删除的备份

velero backup create mybackup --include-namespaces=mynamespace --ttl=1h

获取备份列表

velero backup get

获取mybackup这个备份的详情信息

velero backup describe mybackup

删除mybackup这个备份

velero backup delete mybackup

从某一个备份上恢复，如果备份有多个命名空间也可以只恢复其中一个

velero restore create --from-backup=mybackup-01 --include-namespaces=mynamespace

每天1点创建一个72小时删除的mynamespace备份

velero schedule create myschedule --schedule="0 1 * * *" --ttl 72h --include-namespaces=mynamespace

查看备份位置配置

kubectl -n velero get BackupStorageLocation -o yaml

参考：https://cloud.tencent.com/developer/article/1765348

willops
关注
  • 3
    点赞
  • 踩
  • 17
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
Kubernetes进阶之应用与持久化数据卷备份迁移实践
WeiyiGeek 唯一极客IT知识分享
08-12 891
0x00 前言简述1.Velero 基础概述2.Velero 工作原理3.Provider 插件供应商4.补充说明0x01 环境部署1.先决条件2.下载部署 Velero3.设置Minio服务器0x02 备份迁移实践1.官方示例2.实战容灾恢复0x0n 入坑出坑1.采用Velero 1.6.2 提供得官方资源清单部署后从无法访问MINIO Web-UI管理界面0x00...
k8s-部署velero去备份etcd
渐行渐远的博客
04-21 95
前期环境说明： velero备份必须存储在对象存储里，这里用minio来做对象存储。 一 minio部署 # docker pull minio/minio:RELEASE.2022-04-12T06-55-35Z # mkdir -p /data/minio #创建minio容器,如果不指定,则默认用户名与密码为 minioadmin/minioadmin,可以通过环境变量自定义,如下: ...
AnyBackup Express 7.0 产品介绍.pptx---------灾备建设好工具
07-03
灾备建设指导 数字化时代的数据保护挑战 集中管理，降低管理成本，提升管理效率 可视化管理，让运维管理有据可依
使用Velero备份与恢复K8s集群及应用
最新发布
07-19 1079
备份容灾一键恢复集群迁移支持备份pv，备份数据加密，通过两种备份插件实现，通过启动命令upload-type参数更改。
kubernetes 迁移容灾备份（velero）
因上努力，果上随缘。但行好事，莫问前程。
07-28 1996
客户端是一些运行在本地的命令行的工具，需要已配置好kubectl及集群kubeconfig的机器上。迁移场景提供拷贝集群资源到其他集群的能力（复制同步开发，测试，生产环境的集群配置，简化环境配置）AK和SK登录腾讯云，通过【访问管理】-【访问密钥】-【API密钥管理】进行查看。AWSS3以及兼容S3的存储，比如Minio。服务端运行在你Kubernetes的集群中。点击存储桶---基础配置---基本信息就可以看到。灾备场景提供备份恢复k8s集群的能力。......
kubernetes集群备份与恢复管理工具Velero
weixin_44093727的博客
02-15 1654
kubernetes集群备份与恢复管理工具Velero
使用 Velero 进行 Kubernetes 灾难恢复
weixin_37714509的博客
09-03 136
使用 Velero 进行 Kubernetes 灾难恢复 以容器为中心的托管应用程序方法比传统的 VM 方法在性能、成本、灵活性等方面具有多种优势。 Kubernetes 是当今管理容器化工作负载和服务的广泛使用的工具之一。数据的备份和恢复在组织和 Kubernetes 中是非常关键的部分，因为容器化的应用程序平台支持各种工具在灾难恢复期间进行数据备份和恢复。 在 云信达，我们使用 Velero 来备份 Kubernetes 工作负载。Velero 是 Kubernetes 集群的便捷备份工具，可将 Kub
k8s备份工具velero
johnhuster的专栏
03-07 2219
veleo备份原理 本地Velero客户端发送备份指令。 Kubernetes集群内就会创建一个Backup对象。 BackupController监测Backup对象并开始备份过程。 BackupController会向API Server查询相关数据。 BackupController将查询到的数据备份到远端的对象存储。 Velero在Kubernetes集群中创建了很多CRD以及相关的控制器，进行备份恢复等...
5-1 Velero 备份 Kubernetes 详解
qq_25874461的博客
03-12 229
详细介绍 Velero 工具的原理和使用方法，并备份单个 namespace 示例
Kubernetes备份还原概述
小小小小杜
08-14 998
对于在生产环境使用的Kubernetes，我们可以利用kubeadm搭建高可用集群，一定程度实现容灾： 但是即便实现集群的高可用，我们依旧会需要备份还原功能，主要原因如下： 误删除：运维人员不小心删除了某个namespace，某个pv 服务器死机：因为物理原因服务器损坏，或者需要重装系统 集群迁移：需要将一个集群的数据迁移到另一个集群，用于测试或者其它目的 而对于Kubernetes的备份和还原，社区有一个16年创建的issue，从这个issue中我们可以看出Kubernetes官方并不打算提供Kub
Kubernetes中的数据备份和恢复
Kubernetes数据备份和恢复的重要性 ## 1.1 数据备份对于Kubernetes集群的重要性 在Kubernetes集群中，数据备份是至关重要的。Kubernetes作为一个容器编排平台，托管着各种微服务和持久化数据。在生产环境中，这些...
velero-install:Velero + Minio安装脚本
03-08
此velero install提供了velero install和helm install velero脚本。
Kubernetes中的数据可靠性与备份策略
Kubernetes作为容器编排与管理的优秀工具，被广泛应用于各个领域。然而，随着应用规模的增大和复杂性的提升，数据可靠性保障和备份策略成为了容器化环境下的一项重要课题。 当前，许多企业和组织都将关键的业务数据...
Kubernetes集群高可用：HAProxy、etcd与集群备份
理解Kubernetes集群高可用 Kubernetes是一个开源的容器编排平台，具有高可用性是确保业务持续稳定运行的重要条件之一。在Kubernetes集群中，高可用性指的是系统能够在面对故障时保持高水平的可用性和稳定性，不...
K8s：通过Velero实现集群备份和恢复
xiuqingzhouyang的博客
03-10 1728
Velero 的简单介绍 Velero 是一个 vmware 开源的工具，用于 k8s 安全备份和恢复、执行灾难恢复以及迁移 Kubernetes 集群资源和持久卷。在这里插入图片描述 Velero 可以做的：备份集群并在丢失时恢复。 将集群资源迁移到其他集群。 将您的生产集群复制到开发和测试集群。 Velero 包括两部分：在集群上运行的服务器(Velero 服务器) 在本地运行的命令行客户端(velero cli) 什么时候使用 Velero 代替 etcd 的内置备份/恢复是合适的？ 关于 Veler
部署 k8s 备份工具 velero
Johnny_Li的博客
10-04 1948
简介： Velero 是一个云原生的灾难恢复和迁移工具，采用 Go 语言编写，可以安全的备份、恢复和迁移Kubernetes集群资源和持久卷。velero是备份整个 k8s 集群所有的数据，胜过 etcd 备份。 Velero目前包含以下特性： 支持Kubernetes集群数据备份和恢复 支持复制当前Kubernetes集群的资源到其它Kubernetes集群 支持复制生产环境到开发以及测试环境...
velero实现对k8s数据备份与恢复
weixin_42188217的博客
05-05 2318
velero是一个有Vmware开源的工具，是一个云原生的灾难恢复和迁移工具，采用Go语言编写，用于安全的备份、恢复和迁移Kubernetes集群资源数据。
使用Velero备份K8S资源，看这篇干货就够了
gjjumin的专栏
12-20 1414
Velero提供备份和恢复 Kubernetes 集群资源和持久卷的工具。对群集进行备份，并在丢失时进行还原。将集群资源迁移到其他集群。在群集上运行的服务器在本地运行的命令行客户端Velero。
Kubernetes Master节点 灾备恢复操作指南
weixin_34384915的博客
03-22 462
花了快很久时间测试，才完成的。 还有优化的可能的。 就是插件pod的认证。 Kubernetes Master节点 灾备恢复操作指南 目录 一，Etcd数据备份及恢复... 1 A,单节点etcd数据备份和恢复... 2 B，etcd集群数据的备份和恢复... 2 二，Master节点控制组件的备份及恢复... 3 A，主节点数据备份... 3 ...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值