百度bosimport工具配置使用

bosimport目录结构:
在这里插入图片描述
首选需要配置client/resources/client.properties,需要配置的内容如下,先判断是从什么类型对象存储导入到百度bos,比如阿里oss则取用client.properties.oss文件,然后拷贝到client的resources目录下并修改文件名为client.properties,然后只需修改下面配置:
在这里插入图片描述
srcAk、srcSk、srcBucketName和src…源对象存储服务器
以及dstAk等四个参数 目标对象存储服务器
然后taskList要配置指向一个文件,taskList如下内容:
在这里插入图片描述
这里面可以行任务文件,因为任务执行是依次每个文件开始执行,拆分为多个任务执行挺不错的。然后每个任务里面内容如下:
在这里插入图片描述
touhao 代表源的bucketName
j6mw68ciyeercwr9ost9.jpg 代表源对象的key
shijiboxtest 代表目标bucketName
sxb/j6mw68ciyeercwr9ost9.jpg 代表即将保存为目标对象的key
没一行就代表一个从oss对象导入到bos对象
每行各个参数之间用空格 隔开 ,注意不是 TAB ,是空格
这四个参数顺序对应
resources/client.properties中的配置,默认不用改动直接能使用
listFormat=srcBucketName;name;dstBucketName;dstObjectName

最后,server目录下的配置默认不用改动,并且运行环境要在linux环境,安装jdk7环境,然后可以执行运行主目录下的start_migration.sh脚本执行,运行完了可以stop_migration.sh 结束任务
运行过程中可以使用命令:
tail -f client/logs/status.log 开查看导入的进度,如下面进度图:
在这里插入图片描述
总共1886个任务,然后进度会一个一个增加,看日志能清楚看到,最后执行完会finished.
百度bosimport导入工具记录这些,或许可能帮助别人,自己也能有收获!

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

wangyue23com

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值