minio数据迁移工具rclone

3 篇文章 0 订阅

概述

公司某个k8s环境的minio持久化使用的本地磁盘nfs作为存储类,现需要迁移到nas存储,部署在集群上的minio集群也需要进行同步迁移,下面分享一下其过程。

一、场景概述

1.1 环境信息
minio集群地址桶名备注
http://minio.old.k8s.comagile-service旧minio集群
http://minio.new.k8s.comagile-service新minio集群
1.2 使用工具
  • rclone:开源的对象存储在线迁移工具,用于文件和目录的同步,支持阿里云的oss、minio 、亚马逊S3 等,官网地址:rclone
1.3 注意事项

1、两台机器的时区及时间要保持一致,最后进行迁移之前,两台机器的时间进行校准。方法如下:

  • centos 7设置时区
    timedatectl set-timezone Asia/Shanghai
    
  • 时间同步
    ntpdate ntp.aliyun.com
    

二、部署过程

2.1 rclone安装
curl https://rclone.org/install.sh | sudo bash
2.2 生成配置文件
rclone config

按照提示一步步,输入相应配置,即可。生成的文件位于:${HOME}/.config/rclone/目录下。

root@k8s-master01:~# cd ${HOME}/.config/rclone/
root@k8s-master01:~/.config/rclone# ls
rclone.conf
root@k8s-master01:~/.config/rclone#

rclone.conf配置文件信息:
在这里插入图片描述

[minio]
type = s3
provider = Minio
env_auth = false
access_key_id = minio
secret_access_key = minio123
region = cn-east-1
endpoint = http://minio.old.k8s.com
location_constraint =
server_side_encryption =
[minio1]
type = s3
provider = Minio
env_auth = false
access_key_id = minio
secret_access_key = minio123
region = cn-east-1
endpoint = http://minio.new.k8s.com
location_constraint =
server_side_encryption =

注:rclone.conf配置文件可以手动创建,放在指定目录就可以了。

2.3 开始迁移
1、开始迁移
rclone sync minio:agile-service minio1:agile-service

在这里插入图片描述

2、迁移后结果展示

在这里插入图片描述

官方minio示例:minio
  • 2
    点赞
  • 21
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
针对minio数据迁移,可以通过使用硬件媒介或者网络传输的方式进行。其中,使用硬件媒介实现数据迁移的步骤如下: 1. 准备一个用于存储数据的目录,比如将minio数据目录置于/data/minio。 2. 确保minio数据目录与根目录不在同一个磁盘上,需要单独挂载。 3. 如果要在根目录下创建/data/minio目录,可以使用命令mkdir /data/minio来创建。 另外,还可以使用Rclone工具来实现minio数据迁移。使用Rclone进行数据迁移的步骤如下: 1. 准备好Rclone工具。 2. 确保网络通畅或者不同服务器之间可以进行数据迁移。 3. 使用Rclone工具进行minio数据迁移。这种方式安全、简单易用,但是可能会耗费较多的时间,且操作相对繁琐。 同时,需要注意的是,minio支持副本功能,即传入minio中的数据会复制两份,分别存储在规划好的/data/minio/data1和/data/minio/data2目录中。在没有设置纠删码的前提下,数据会存在两份。因此,在启动脚本中需要配置相应的存储位置和声明。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *3* [minio 部署、迁移、使用](https://blog.csdn.net/Jerry00713/article/details/130008107)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] - *2* [Minio数据迁移](https://blog.csdn.net/qq_43429919/article/details/121390515)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值