RestTemplate 下载文件

1. 概述

本教程中,我们将展示使用 RestTemplate 下载大文件的不同技术。

2. RestTemplate

RestTemplate 是 Spring 3 中引入的同步阻塞式 HTTP 客户端。根据 Spring 官方文档 介绍,在将来的版本中它可能会被弃用,因为他们已在 Spring 5 中引入了 WebClient 作为非阻塞式 Reactive HTTP 客户端。

3. 陷阱

通常,当我们下载文件时,我们会将其保存在本地文件系统中,或者作为字节流加载到内存中。但是,当遇到大文件时,内存加载可能会造成 OutOfMemoryError。因此,当我们读取 response 块时,必须将其保存到文件中。

我们先来看这两种不起作用的方法:

第一个,当我们将 Resource 作为我们的返回值类型时会发生什么?

  •  
  •  
  •  
 
  1. Resource download() {

  2. return new ClassPathResource(locationForLargeFile);

  3. }

ResourceHttpMesssageConverter 会将整个 response 块加载到 ByteArrayInputStream 中,依旧增加了我们本想避免的内存压力。

第二个,当我们配置 ResourceHttpMessageConverter#supportsReadStreaming 方法,并返回 InputStreamResource,会发生什么?好吧,它也不会起作用,**当我们调用 InputStreamResource.getInputStream() 时,将得到一个 socket closed 错误!**这是由于 execute 方法在它退出前会关闭 response 输入流所造成的。

所以我们可以怎样解决这个问题呢?实际上,也有两种办法:

基于它们的灵活性和实现难度,本教程对第二种解决方案来展开介绍。

4. 无需恢复的下载

让我们来实现一个 ResponseExtractor,用以将 body 写入到临时文件中。

 
 
  1. File file = restTemplate.execute(FILE_URL, HttpMethod.GET, null, clientHttpResponse -> {

  2. File ret = File.createTempFile("download", "tmp");

  3. StreamUtils.copy(clientHttpResponse.getBody(), new FileOutputStream(ret));

  4. return ret;

  5. });

  6.  
  7. Assert.assertNotNull(file);

  8. Assertions

  9. .assertThat(file.length())

  10. .isEqualTo(contentLength);

这里我们使用 StreamUtils.copy 将 response 输入流复制到 FileOutputStream 中,同样,也可以使用 其他方式 来实现。

5. 可暂停和恢复的下载

当我们进行大文件下载时,可能会因为某些原因,我们会在暂停之后继续进行下载。

所以,第一步,我们需要检查 URL 下载链接是否支持恢复下载:

 
 
  1. HttpHeaders headers = restTemplate.headForHeaders(FILE_URL);

  2.  
  3. Assertions

  4. .assertThat(headers.get("Accept-Ranges"))

  5. .contains("bytes");

  6. Assertions

  7. .assertThat(headers.getContentLength())

  8. .isGreaterThan(0);

然后,我们可以实现 RequestCallback 来自定义 Range 请求头来恢复下载:

 
 
  1. restTemplate.execute(

  2. FILE_URL,

  3. HttpMethod.GET,

  4. clientHttpRequest -> clientHttpRequest.getHeaders().set(

  5. "Range",

  6. String.format("bytes=%d-%d", file.length(), contentLength)),

  7. clientHttpResponse -> {

  8. StreamUtils.copy(clientHttpResponse.getBody(), new FileOutputStream(file, true));

  9. return file;

  10. });

  11.  
  12. Assertions

  13. .assertThat(file.length())

  14. .isLessThanOrEqualTo(contentLength);

如果我们不确定具体的 Content 长度,可以使用如下的 String.format 形式来设置 Range 请求头

 
String.format("bytes=%d-", file.length())

 

  • 0
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值