背景
最近有人问我百度云盘或者是阿里云盘等是怎么做到文件秒传的,对于大文件如果因为网络原因是否能做到断点续传。因此,我想写个文章记录下我对这个两个问题的验证和解答。
相关概念
秒传
秒传是一种在网盘上常见的“忽略式”上传方式,是指文件传输速度非常快。
当用户向网盘中上传文件时,服务器会判断当前存储中是否有该文件,如果文件不存在就执行上传操作,如果已经存在了该文件,那就直接忽略该文件的上传,提示用户文件已经秒传,并将找到的文件链接引用给该用户(方便在使用的时候找到文件)
MD5值
那么怎么判断文件是否存在呢?可以通过文件的md5值
MD5信息摘要算法(英语:MD5 Message-Digest Algorithm),一种被广泛使用的密码散列函数,可以产生出一个128位(16字节)的散列值(hash value),用于确保信息传输完整一致
断点续传
客户端软件断点续传指的是在下载或上传时,将下载或上传任务(一个文件或一个压缩包)人为的划分为几个部分,每一个部分采用一个线程进行上传或下载,如果碰到网络故障,可以从已经上传或下载的部分开始继续上传下载未完成的部分,而没有必要从头开始上传下载。用户可以节省时间,提高速度
流程图
大体逻辑:页面上传选取文件后,计算出该文件的md5值,请求服务器判断该文件是否在服务端已有存储,如果有存储提示用户是秒传成功,没有存储的话根据断点续传中分片大小判断文件需要分成多少个碎片,然后对每个碎片进行md5值计算,并将该值存储到服务端,当因为网络或者是其他操作导致中断传输之后,再次上传的时候,可以跳过已经存在的文件,从而达到快速上传文件的目的。
具体代码实现
前端代码
<!DOCTYPE html>
<html lang="en">
<head>
<meta charset="UTF-8">
<title>上传文件</title>
</head>
<body>
<form enctype="multipart/form-data">
<input type="file" id="file" value="选择文件"/>
<br/>
<progress class='progressbar' value="0" max="100" s