java异步导出实现

背景

假设我们有一个在线学习平台,管理员需要定期生成销售报告,包括课程销售情况和用户购买情况等重要数据。然而,由于数据量较大,生成报告可能需要较长时间,并且可能会占用大量系统资源,从而影响用户的使用体验。为了解决这个问题,我们考虑采用异步导出的方案。

异步导出的工作原理是将导出操作放在一个异步任务中执行,而不是立即在用户发起导出请求后执行导出操作。这样一来,用户无需等待导出任务完成,就可以继续进行其他操作,而系统则在后台完成导出任务。

这种方案有以下优点:

  1. 提高系统响应速度: 用户发起导出请求后,系统可以立即响应而不必等待导出任务完成,从而提高了系统的响应速度。

  2. 改善用户体验: 用户无需等待导出任务完成,可以继续使用系统进行其他操作,这有助于提升用户体验。

  3. 降低系统负载: 将耗时的导出操作放在异步任务中执行,可以避免阻塞系统资源,从而降低系统的负载,确保其他用户的操作不受影响。

异步导出在许多需要处理大量数据或耗时操作的场景中都非常有用,可以有效提升系统的性能和用户体验。

数据库设计

首先我们需要设计一个保存导出任务的表,需要记录流转状态、操作人、任务参数,后续任务的创建、导出完成/失败都需要操作这张表

CREATE TABLE `t_export_task`
(
    `id`               bigint(20) NOT NULL AUTO_INCREMENT COMMENT '主键',
    `task_id`          varchar(50)   NOT NULL COMMENT '任务id',
    `task_type`        tinyint(4) NOT NULL COMMENT '任务类型',
    `task_param`       varchar(1000) NOT NULL COMMENT '任务参数',
    `status`           tinyint(3) NOT NULL DEFAULT 0 COMMENT '状态 0-处理中 1-成功 -1失败',
    `file_url`         varchar(500)           DEFAULT NULL COMMENT '文件url',
    `remark`         varchar(200)           DEFAULT NULL COMMENT '备注',
    `create_user_id`   int(11) NOT NULL COMMENT '操作人id',
    `create_user_name` varchar(50)   NOT NULL COMMENT '操作人名称',
    `create_time`      datetime      NOT NULL DEFAULT CURRENT_TIMESTAMP COMMENT '创建时间',
    `update_time`      datetime      NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP COMMENT '更新时间',
    PRIMARY KEY (`id`)
) ENGINE=InnoDB COMMENT='导出任务记录';

代码实现

导出工具类 :

负责提交导出任务、取消任务以及上传导出文件到OSS服务器等功能。

  1. 导出任务线程池: 通过 ExecutorService 线程池来执行导出任务,并确保线程池的单例化,防止重复创建,提高性能。

  2. 导出类型对应的任务: 使用 Map<Integer, CompletableFuture<String>> 来保存正在运行的导出任务,以便后续取消任务或跟踪任务状态。

  3. 提交导出任务: 提交导出任务时,先初始化线程池,然后使用 CompletableFuture.supplyAsync() 方法执行异步任务,并在异步任务中生成导出文件,然后上传到OSS服务器,最后返回导出文件的URL。

  4. 取消任务: 取消任务时,从保存的任务映射中获取对应的 CompletableFuture 实例,并调用 cancel() 方法取消任务。

  5. 上传文件到OSS服务器: uploadToOS

  • 32
    点赞
  • 39
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
Java异步导出Excel可以通过使用多线程或异步任务来实现。以下是使用异步任务的示例代码: 1. 首先,你需要定义一个实现了Callable接口的任务类,用来执行Excel导出操作。例如: ``` public class ExcelExportTask implements Callable<File> { private List<Data> dataList; public ExcelExportTask(List<Data> dataList) { this.dataList = dataList; } @Override public File call() throws Exception { // 执行Excel导出操作,返回导出文件 return ExcelUtils.export(dataList); } } ``` 2. 在Controller中,定义一个异步导出Excel的方法。例如: ``` @GetMapping("/export") public Callable<ResponseEntity<byte[]>> exportExcel() { List<Data> dataList = dataService.getDataList(); ExcelExportTask task = new ExcelExportTask(dataList); return () -> { try { File file = task.call(); byte[] bytes = FileUtils.readFileToByteArray(file); HttpHeaders headers = new HttpHeaders(); headers.setContentType(MediaType.APPLICATION_OCTET_STREAM); headers.setContentDispositionFormData("attachment", file.getName()); return new ResponseEntity<>(bytes, headers, HttpStatus.OK); } catch (Exception e) { e.printStackTrace(); return null; } }; } ``` 3. 在异步导出Excel的方法中,我们首先获取需要导出的数据,然后创建一个ExcelExportTask对象,并返回一个Callable对象。在Callable的call()方法中,执行Excel导出操作,并返回导出的文件。最后,将导出的文件转换成byte数组,并返回一个ResponseEntity对象,以供前端下载。 这样,当用户请求异步导出Excel时,不会阻塞主线程,而是异步执行Excel导出操作。用户可以继续浏览页面或进行其他操作,直到下载Excel文件。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

linsm1231

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值