如何分发大文件、大文件传输解决方案

本文链接：https://blog.csdn.net/weixin_52041354/article/details/140065939

如何分发大文件、大文件传输解决方案，单个文件可能达到100G左右，特殊行业，图像数据，视频数据，设计图纸都是超大，高清的。需要支持多种浏览器，需要支持信创国产化环境，因为客户是一家政府单位，后端的话需要支持JAVA,SpringBoot，前端的话需要支持HTML，VUE。另外文件的上传下载都需要支持，因为用户将图纸传到服务器后，其它的用户需要下载，需要支持加密传输，加密算法用的是国密SM4，上传下载都需要支持加密传输，需要支持文件夹上传，用户可能同时上传100个文件。服务器端还需要支持加密存储，分布式存储，比如FastDFS，因为公司的产品之前用的就是FastDFS，所以现在增加这个功能后也需要兼容和支持。，云对象存储，比如华为云，MinIO

JAVA大文件(10G以上)的上传下载实现技术，前后端大文件上传，断点续传、分片上传、秒传的完整实例，JAVA 大文件上传解决方案，大文件上传最全方案：分片上传，大文件上传最全方案：分布式存储，大文件上传最全方案：加密存储，大文件上传最全方案：加密上传，大文件上传最全方案：秒传、断点续传、分片上传，

百度webuploader大文件上传和下载解决方案，webuploader大文件上传和下载解决方案，php大文件上传和下载解决方案，SpringMVC大文件上传和下载解决方案，SpringCloud大文件上传和下载解决方案，SpringBoot大文件上传和下载解决方案，

网页大文件上传和下载解决方案，前端大文件上传和下载解决方案，html大文件上传和下载解决方案，jsp大文件上传和下载解决方案，java大文件上传和下载解决方案，大文件上传和下载解决方案，

前端的话也不一定是vue，最好是vue，HTML都支持，因为公司这边有自己的产品，产品里面有HTML的也有VUE，所以最好都能够支持。文件的话要求最大能够支持到200G以上，因为我们是给特殊行业做的项目，单个文件就比较大。

公司项目组这边后端是用的JAVA，因为是自己研发的产品，时间有点早，用的是JSP的框架，现在客户那边的一个项目也是用的这个产品，客户现在提的需求就是支持单个文件10G的上传和下载。

之前在网上也找过相关的资料，论坛里面也有网友交流过。

后端用的JAVA，JSP，SpringBoot，前端用了JSP，VUE2，VUE3，React，需要实现大文件的上传和下载。

要求支持文件夹的上传下载，支持断点续传，支持加密传输，端到端的加密传输，上传过程中数据加密，下载过程中数据加密，下载后自动解密，上传支持加密存储，

文件夹下载支持以非打包方式下载，用户上传的文件夹包含1万个文件，文件有大有小，大的可能1G~10G，如果打包下载的话，服务器的磁盘空间不够。

文件夹上传支持保存层级结构，层级结构信息保存到数据库中，

文件夹下载支持保留层级结构，上传的是什么结构，下载同样是什么结构

加密算法支持国密SM4，涉密单位使用。

服务器支持Linux，Windows,macOS,CentOS,中标麒麟，银河麒麟，统信，龙芯，华为鲲鹏，

数据库支持MySQL，达梦数据库，人大金仓

需要提供前端源代码，后端源代码，控件源代码

需要提供7*24小时技术支持，长期技术支持，长期维护服务，1对1技术支持服务，二次开发培训服务，二次开发指导服务

需要提供手机，QQ，微信，企业微信，电子邮箱等联系方式

需要支持包含IE在内的全部浏览器

终端需要支持Windows,macOS,Linux,信创国产化环境，中标麒麟，银河麒麟，统信UOS，龙芯，华为

功能需要支持10G，50G,100G大文件上传和断点续传，刷新续传，重启续传

支持超大文件分片，分段，分块，分割上传下载，断点续传

支持文件夹上传，下载断点续传，支持文件夹层级结构，层级结构信息保存到数据库，下载的时候同样保留层级结构

支持加密上传，下载加密，端到端加密，国密SM4加密算法，数据加密传输，传输过程中要保证数据是加密的。

网上一般的做法都是用的HTML5的API，也就是chrome提供的API，能够满足基本需求，但是还是有痛点，chrome限制死了，固定死了无法扩展，每个域名只允许5个TCP连接，导致了速度有上限，你也无法修改和扩展。然后就是浏览器也只能用chrome，用户用了IE就不行了，用户现有的系统跑在IE上，也不能换。

进度信息容易丢失，用户关闭网页，刷新网页，关闭浏览器，重启浏览器，关闭电脑，重启电脑后，进度信息都会丢失，无解，没办法。扩展性还是差了点。

传大文件，超大文件，文件数量多的话，前端就卡，网页反应慢，容易死，崩溃，在配置较差的电脑或者配置一般的电脑上这个痛点体现的非常明显。

下载，网上找到的资料一般都是讲上班的，很少讲下载的。

有不同的部门，研发部门和客户那边的终端系统平台都不一样，销售部门用macOS多一些，主要是向客户展示一些资料。研发部门的话windows和macOS都用了，后端和运维的同事用的linux多一些，主要就是centos和ubuntu，不过我们的客户有政府单位的，用了信创国产化的系统和CPU，有龙芯，华为鲲鹏。

领导还提了一个要求，就是要提供产品的所有源代码，如果有控件就提供控件，领导要求自主可控，买断产品，我们这边有开发同事，领导是希望我们自已能够维护，我们有自已的产品，是要求集成到我们自已的产品中，一起提供给客户使用。

1.全球唯一商业化开源产品，免费提供源代码下载服务，

免费下载上传控件源代码：https://drive.weixin.qq.com/s?k=ACoAYgezAAwnB0Dk9D