大文件如何做断点续传？

一、是什么

不管怎么样简单的需求，当量达到一定层次时，都会变得遗异常复杂。就比如文件上次简单，但文件变大就复杂，
上传文件时，有几个因素会影响用户体验。

1. 服务器处理数据的能力
2. 请求超时
3. 网络波动
   上传时间会边长，高频次文件上传失败，失败后又需要重新上传等，为了解决这些问题，我们需要对大文件上传单独处理。

1.分片上传

就是将你要上传的文件，按照一定大小，将整个文件分隔成多个数据块进行分片上传

上传完之后再由服务端对所有上传的文件进行汇总整合成原始的文件。
大致流程如下：

1. 将需要上传的文件按照一定的分割规则，分割成相同大小的数据块；
2. 初始化一个分片上传任务，返回本次分片上传唯一标识；
3. 按照一定的策略（串行或并行）发送各个分片数据块
4. 发送完成后，服务端根据判断数据上传是否完整，若完整则进行数据块合成并得到原始数据。

2.断点续传

断点续传指的是在下载或上传时，将下载或上传任务人为的划分为几个部分
每一个部分采用一个线程进行上传或下载，如果碰到网络故障，可以从已经上传或下载的部分开始继续上传下载未完成的部分，而没有必要从头开始上传下载。用户可以节省时间，提高速度
一般实现方式有两种：

1. 服务器端返回，告知从哪开始
2. 浏览器端自行处理
   上传过程中将文件在服务器写为临时文件，等全部写完了（文件上传完），将此临时文件重命名为正式文件即可
   如果中途上传中断过，下次上传的时候根据当前临时文件大小，作为在客户端读取文件的偏移量，从此位置继续读取文件数据块，上传到服务器从此偏移量继续写入文件即可

二、实现思路

整体思路比较简单，拿到文件，保存文件唯一性标识，切割文件，分段上传，每次上传一段，根据唯一性标识判断文件上传进度，直到文件的全部片段上传完毕

三、使用场景

• 大文件加速上传：当文件大小超过预期大小时，使用分片上传可实现并行上传多个 Part， 以加快上传速度
• 网络环境较差：建议使用分片上传。当出现上传失败的时候，仅需重传失败的Part
• 流式上传：可以在需要上传的文件大小还不确定的情况下开始上传。这种场景在视频监控等行业应用中比较常见

小结

当前的伪代码，只是提供一个简单的思路，想要把事情做到极致，我们还需要考虑到更多场景，比如

• 切片上传失败怎么办
• 上传过程中刷新页面怎么办
• 如何进行并行上传
• 切片什么时候按数量切，什么时候按大小切
• 如何结合 Web Worker 处理大文件上传
• 如何实现秒传

参考文献