vue前端下载阿里oss超大文件的问题

最近在开发一个大文件压缩下载需求,由于附件都是从阿里oss上下载,且一次下载多个文件,然后进行打包压缩,前期使用了axios+jszip+file-saver 来进行处理,但是当文件超过3个G的时候会出现out of memory和RangeError: Array buffer allocation failed错误。

下面贴出代码:

 

 后面尝试使用streamsaver+fetch下载大文件

  • 使用常用的 axios 进行下载时,会遇到以下一些问题:
  1. 超时问题:如果下载的文件较大或网络连接较慢,可能会导致请求超时。
  2. 内存问题:如果下载的文件非常大,将整个文件存储在内存中可能会导致内存溢出,下载的文件会出现截断或损坏。
  3. 进度跟踪问题:axios 默认不提供下载进度的功能。需要使用 axios-progress-bar 等第三方库来实现下载进度的监控和显示。
  4. 下载文件时,需要等待整个文件流都下载到内存中才会弹出浏览器的下载文件保存对话框,用户体验较差。
  • 使用Fetch下载相比Axios在文件下载方面的一些优势:
  1. 原生支持:Fetch是浏览器原生提供的API,不需要额外的第三方库或依赖。这意味着在现代浏览器中,无需额外配置即可直接使用Fetch进行文件下载。
  2. 内置的流支持:Fetch使用ReadableStream对象处理响应数据,这使得在下载大文件时能够有效地处理数据流,减少内存占用。相比之下,Axios默认将整个响应加载到内存中,对于大文件下载可能会导致内存问题。
  3. 下载响应开始就可以弹出浏览器下载保存对话框,并且不影响文件流下载,而axios需要等待整个文件流都下载到内存中才会弹出浏览器的下载文件保存对话框
  • StreamSaver:StreamSaver.js 是一个用于在浏览器中实现流式文件下载的 JavaScript 插件。它提供了一种简单而强大的方式来下载大文件或流式数据,而无需将整个文件加载到内存中
  1. 逐步下载:StreamSaver.js 通过逐步写入磁盘,实现了流式下载,避免了将整个文件加载到内存中
  2. 跨浏览器兼容性:StreamSaver.js 支持主流的现代浏览器,包括 Chrome、Firefox、Edge 和 Safari。
  3. 断点续传:通过在下载过程中保存已下载的部分,StreamSaver.js 支持断点续传,即使在网络中断或下载过程中停止,也可以从上次中断的地方恢复下载。

 


                
  • 1
    点赞
  • 12
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
要将文件上传到阿里云 OSS,需要进行以下几个步骤: 1. 安装阿里云 OSS 的 SDK,可以使用官方提供的 `ali-oss` 包。 2. 在前端代码中,通过 `input` 标签获取用户选择的文件,然后将文件传递给后端。 3. 在后端代码中,使用阿里云 OSS 的 SDK,将文件上传到 OSS。 下面是一个简单的 Vue.js 前端代码,用于获取用户选择的文件,并向后端发送文件数据: ```html <template> <div> <input type="file" ref="fileInput" @change="uploadFile"> </div> </template> <script> import axios from 'axios' export default { methods: { async uploadFile() { const file = this.$refs.fileInput.files[0] const formData = new FormData() formData.append('file', file) const res = await axios.post('/api/upload', formData) console.log(res) } } } </script> ``` 在上面的代码中,我们使用了 `axios` 库来发送 POST 请求,并将文件数据封装在 `FormData` 对象中。接下来,在后端代码中,我们需要使用 `ali-oss` 库将文件上传到 OSS: ```javascript const OSS = require('ali-oss') const koaBody = require('koa-body') const client = new OSS({ region: 'your-region', accessKeyId: 'your-accessKeyId', accessKeySecret: 'your-accessKeySecret', bucket: 'your-bucket' }) const uploadFile = async (ctx) => { const file = ctx.request.files.file const result = await client.put(file.name, file.path) ctx.body = { url: result.url } } app.use(koaBody({ multipart: true, formidable: { maxFileSize: 200 * 1024 * 1024 // 设置上传文件大小的上限 } })) app.use(router.post('/api/upload', uploadFile)) ``` 上面的代码中,我们首先使用 `ali-oss` 的 `client` 对象来进行初始化,其中需要填写 OSS 的一些基本信息,比如区域、AccessKeyId、AccessKeySecret 和 Bucket 名称等。 然后,在 `uploadFile` 函数中,我们通过 `ctx.request.files` 对象获取到前端上传的文件数据,然后使用 `client.put` 方法将文件上传到 OSS 中,并返回文件的访问 URL。 最后,我们在 `koa-body` 中启用 `multipart` 模式,以支持文件上传,并设置 `formidable` 的 `maxFileSize` 属性来限制上传文件的大小上限。然后,我们在路由中注册上传文件的接口,以便前端可以将文件数据传递给后端。
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值