目录
前言
云存储服务提供了便捷的数据存储和管理方式,但随着存储量的增长,我们需要定期清理过期的文件以节省存储空间和维护成本。本文将介绍如何使用阿里云的对象存储(OSS)定时删除任务,来自动清理过期的文件。
一、工作原理
OSS配置及上传看阿里云OSS文件上传和下载完整指南
OSS定时删除任务依赖于生命周期规则。生命周期规则定义了存储桶内对象的生命周期,包括对象的过期时间、删除时间等。当对象达到生命周期规则中定义的条件时,OSS会自动执行删除操作。
二、主要特点
- 自动化管理:通过设置生命周期规则,可以自动化地管理文件的生命周期,比如在文件存储一定时间后自动删除。
- 精细控制:可以根据文件的前缀、标签等属性来设置不同的规则,实现对不同类型文件的精细化管理。
- 成本节约:定期清理不再需要的文件,减少存储费用,优化资源利用。
三、生命周期管理
- 规则名称:为每条规则指定一个名称,便于管理。
- 应用范围:通过前缀、标签等限定规则的应用范围,比如只对某个目录或某类文件生效。
- 触发条件:包括过期时间、创建时间、未访问时间等条件,当对象满足这些条件时,执行相应的动作。
- 动作:指定在触发条件满足时执行的动作,比如删除对象、转换存储类型等。
四、优点
- 降低存储成本:自动清理过期文件,避免不必要的存储费用。
- 提升管理效率:减少手动清理工作的繁琐,自动化管理文件生命周期。
- 灵活性高:支持细粒度的规则配置,能满足各种不同需求。
五、Demo讲解
我这里设置的是每天凌晨都会遍历OSS中的文件并删除超过10天的文件
package com.ctb.sf.oss;
import com.aliyun.oss.OSS;
import com.aliyun.oss.OSSClientBuilder;
import com.aliyun.oss.model.*;
import java.util.*;
public class OSSFileCleanup {
// OSS相关配置信息
private static final String endpoint = ""; // OSS Endpoint
private static final String accessKeyId = ""; // Access Key ID
private static final String accessKeySecret = ""; // Access Key Secret
private static final String bucketName = ""; // Bucket名称
// 过期天数阈值
private static final int expirationDays = 10;
public static void main(String[] args) {
TimerTask task = new TimerTask() {
@Override
public void run() {
System.out.println("开始执行定时任务:删除超过 " + expirationDays + " 天的文件");
// 创建OSS客户端
OSS ossClient = new OSSClientBuilder().build(endpoint, accessKeyId, accessKeySecret);
try {
// 列举Bucket中的文件
ObjectListing objectListing = ossClient.listObjects(bucketName);
List<OSSObjectSummary> objectSummaries = objectListing.getObjectSummaries();
System.out.println(objectSummaries);
// 当前时间
Date now = new Date();
// 遍历文件,判断并删除过期文件
for (OSSObjectSummary objectSummary : objectSummaries) {
Date lastModified = objectSummary.getLastModified();
long diffTime = now.getTime() - lastModified.getTime();
long diffDays = diffTime / (1000 * 60 * 60 * 24); // 毫秒转换为天
if (diffDays > expirationDays) {
// 删除文件
String key = objectSummary.getKey();
ossClient.deleteObject(bucketName, key);
System.out.println("已删除文件:" + key);
}
}
System.out.println("定时任务执行完毕");
} catch (Exception e) {
e.printStackTrace();
} finally {
// 关闭OSS客户端
ossClient.shutdown();
}
}
};
// 创建定时器,每天凌晨执行
Timer timer = new Timer();
timer.scheduleAtFixedRate(task, getTomorrowMorning(), 1000 * 60 * 60 * 24); // 每天执行一次
}
// 获取明天凌晨的时间
private static Date getTomorrowMorning() {
Calendar calendar = java.util.Calendar.getInstance();
calendar.add(java.util.Calendar.DATE, 1);
calendar.set(java.util.Calendar.HOUR_OF_DAY, 0);
calendar.set(java.util.Calendar.MINUTE, 0);
calendar.set(java.util.Calendar.SECOND, 0);
calendar.set(java.util.Calendar.MILLISECOND, 0);
return calendar.getTime();
}
}
通过阿里云的OSS可以看到10天前的文件被清除掉