阿里云分片上传云存储

#!/usr/bin/env python
#-*- coding: utf- 8  -*-
#Filename: backupToOSS.py
#Desc:该脚本用于把指定的文件传输到阿里云的OSS中。
 
import  datetime
import  oss2
import  logging
import  sys
#阿里云access_key、secret_key、bucket、endpoint
access_key = xxxxxxxxxxxxx
secret_key = xxxxxxxxxxxxx
bucket_name = xxxxxxxx
endpoint = xxx.aliyuncs.com
# 上传文件到bucket 的dirname目录
dirname = xx
# 设置时间间隔
days_ago = xx
# 需要备份的文件位置
filepath = /xxx/xxxx/xxx/
 
for  param in (access_key, secret_key, bucket, endpoint):
     assert  '<'  not in param,  '请设置参数:'  + param
 
bucket = oss2.Bucket(oss2.Auth(access_key, secret_key), endpoint, bucket_name +  '/'  + dirname )
# 获取当天时间以前 days_ago天 的日期,精确到天
time1=((datetime.datetime.now()-datetime.timedelta(days=days_ago)).strftime( "%Y%m%d" ))
# 需要上传的文件:filepath下 以 年月日.tgz 命名的文件
file_upload = filepath + time1 +  ".tgz"
ossName = time1 +  ".tgz"
nowTime = datetime.datetime.now().strftime( '%Y%m%d_%T' )
 
try :
     bucket.put_object_from_file(ossName, file_upload)
except IOError:
     logging.exception( "######" +nowTime+ "######" )
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
阿里云OSS分片文件上传是一种将大文件分成多个数据块(Part)进行上传的方法,以实现高效的文件上传和断点续传功能。这种分片上传的方法可以应用于需要传输大文件的场景,比如视频点播文件等。 分片上传的步骤包括初始化一个分片上传事件、上传分片和完成分片上传。首先,需要初始化一个分片上传事件,获取一个唯一的上传ID和用于标识上传的文件名。然后,将文件分成多个数据块,逐个上传每个数据块,并记录每个数据块的编号和ETag。最后,通过调用完成分片上传的接口,将所有上传的数据块合并成一个完整的文件。 在分片上传过程中,可以通过监控上传进度,实时获取上传的数据块数目和总数据块数,从而了解上传的进度情况。可以使用两种方式来实现监控上传进度,一种是通过查询上传事件的接口来获取已经上传的数据块数目和总数据块数,另一种是通过每个数据块上传完成时的回调来更新上传进度。 在使用分片上传时,需要注意一些事项。首先,每个数据块的大小可以根据实际需求进行调整,但要遵循OSS的限制条件。其次,上传数据块时需要保证数据块的顺序和完整性,以确保数据块可以正确地组合成完整的文件。最后,完成分片上传后,需要注意保存上传ID和ETag,以便之后可以进行断点续传操作。 总结来说,阿里云OSS分片文件上传是一种将大文件分成多个数据块进行上传的方法,可以实现高效的文件上传和断点续传功能。通过分片上传,可以有效地应对大文件传输的需求,并且通过监控上传进度和注意事项,可以更好地控制和管理文件上传的过程。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *2* *3* [阿里云对象存储OSS-分片上传](https://blog.csdn.net/Morris_/article/details/102813989)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 100%"] [ .reference_list ]

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值