Html5大文件断点续传实现方法


Posted in HTML / CSS onDecember 05, 2015

大文件分块

一般常用的web服务器都有对向服务器端提交数据有大小限制。超过一定大小文件服务器端将返回拒绝信息。当然,web服务器都提供了配置文件可能修改限制的大小。针对iis实现大文件的上传网上也有一些通过修改web服务器限制文件大小来实现。不过这样对web服务器的安全带了问题。攻击者很容易发一个大数据包,将你的web服务器直接给拖死。
现在针对大文件上传主流的实现方式,通过将大文件分块。比如针对一个100M文件,按2M拆分为50块。然后再将每块文件依次上传到服务器上,上传完成后再在服务器上合并文件。
在web实现大文件上传,核心主要实现文件的分块。在Html5 File API 出现以前,要想在web上实现文件分块传输。只有通过flash或Activex实现文件的分块。

在Html5 下,我们可以直接通过file的slice 方法来实现文件的分块。如:

XML/HTML Code复制内容到剪贴板
  1. file.slice(0,1000);    
  2. file.slice(1000,2000);    
  3. file.slice(2000,3000);  
然后再通过XMLHttpRequest异步上传到服务器。

Html5 上传文件类库

如果你有兴趣及时间 ,当然可以自己用html5的File API来实现。本人在网上查找到了以下两个支持html5类库。
resumable.js 附git上的地址:https://github.com/23/resumable.js
Pludload http://plupload.com/

resumable是一个纯html5上传类库。
而Pludload是一个支持html5,flash,silverlight,html4,它会自动判断浏览是否支持html5不支持将用其它的上传方式。
我测试下来,resumable和Pludload都支持html5分块上传文件。用下来觉得resumable比较适合,以下就选resumable来进行介绍。

resumable.js断点上传使用介绍

主要配置介绍:

JavaScript Code复制内容到剪贴板
  1. var r = new Resumable({   
  2.             target:'/test/upload',   
  3.             chunkSize:1*1024*1024,   
  4.             simultaneousUploads:4,   
  5.             testChunks: true,   
  6.             throttleProgressCallbacks:1,   
  7.             method: "octet"  
  8.           });  
chunkSize 分块文件大小,以字节为单位
simultaneousUploads 同时上传文件块的进程数,可以同时允许多个文件块上传。
testChunks 上前文件块是否先通过get方式发送文件信息检测文件是否已经上传。

resumable断点上传是通过testChunks配置节点来实现,当设置为true时。resumable会先发送一个get请求,如果http状态返回 200。则认为当前块已经上传完成,然后进行下一块的get请求。如果http状态返回的不是200,则将通过post方式发送当前块数据包进行文件块上传。

设置testChunks为true每次上传都会增加一个get请求,如果我们已经知道上次中断上传前文件的块数。下次直接从中断的块数上传就行了。这样可以为每个块减少一次http的get请求。
针对这个需求,我修改了resumable的源码,为resumable里的file对象增加了一个startchunkindex的属性,默认为0。用于设置当前文件从哪一个块开始上传。这样,我们只需要在在文件上传前从服务器上进行一次查询(查询当前文件上传到哪一块),返回上次上传的文件块索引。再将索引值设置到file的startchunkindex属性就可以实现从上次断开的文件块开始上传。
调用方式:

JavaScript Code复制内容到剪贴板
  1. // Handle file add event   
  2.               r.on('fileAdded'function (file) {   
  3.                   file.startchunkindex = 0; // 设置当前文件开始上传的块数  
具体可以查看附件里的demo。

收尾工作

所有文件块上传完,最后工作就是合并保存文件。附件为resumable断上传.net实现的服务端例子,包括简单的文件合并功能。其它语言的demo大家也可以从resumable的git上下载。
demo例子为了简单,只是把文件存放在本机。在真实的生产环境中。一般应该放在单独的文件服务器上(前台web通过ftp或文件夹共享方式上传到文件服务器),然后对上传好的文件进行分发镜像或处理(比如视频压缩)。当然最好是存在分布式文件系统中,目前看下来放到Hadoop分布式文件系统(HDFS)是一个不错的好方案。

demo
Html5大文件断点续传实现方法
Vs2012 Html5 Upload demo下载

HTML / CSS 相关文章推荐
用css3制作纸张效果(外翻卷角)
Feb 01 HTML / CSS
纯css3实现的动画按钮的实例教程
Nov 17 HTML / CSS
举例详解CSS3中的Transition
Jul 15 HTML / CSS
CSS3 实现雷达扫描图的示例代码
Sep 21 HTML / CSS
html5服务器推送_动力节点Java学院整理
Jul 12 HTML / CSS
利用canvas实现图片下载功能来实现浏览器兼容问题
May 31 HTML / CSS
HTML5 canvas画矩形时出现边框样式不一致的解决方法
Oct 14 HTML / CSS
详解移动端html5页面长按实现高亮全选文本内容的兼容解决方案
Dec 03 HTML / CSS
H5调用相机拍照并压缩图片的实例代码
Jul 20 HTML / CSS
iPhoneX安全区域(Safe Area)底部小黑条在微信小程序和H5的屏幕适配
Apr 08 HTML / CSS
使用CSS实现小三角边框原理解析
Nov 07 HTML / CSS
CSS 鼠标点击拖拽效果的实现代码
Dec 24 HTML / CSS
HTML5有哪些新特征
Dec 01 #HTML / CSS
浅析移动设备HTML5页面布局
Dec 01 #HTML / CSS
深入浅析HTML5中的SVG
Nov 27 #HTML / CSS
基于HTML5代码实现折叠菜单附源码下载
Nov 27 #HTML / CSS
HTML5标签使用方法详解
Nov 27 #HTML / CSS
推荐WEB开发者最佳HTML5和CSS3代码生成器
Nov 24 #HTML / CSS
分享29个基于Bootstrap的HTML5响应式网页设计模板
Nov 19 #HTML / CSS
You might like
PHP笛卡尔积实现算法示例
2018/07/30 PHP
PHP7 字符串处理机制修改
2021/03/09 PHP
JQuery的html(data)方法与<script>脚本块的解决方法
2010/03/09 Javascript
js中各浏览器中鼠标按键值的差异
2011/04/07 Javascript
js获取页面description的方法
2015/05/21 Javascript
如何使用jQuery技术开发ios风格的页面导航菜单
2015/07/29 Javascript
自定义刻度jQuery进度条及插件
2015/09/02 Javascript
jQuery点击改变class并toggle及toggleClass()方法定义用法
2015/12/11 Javascript
使用Function.apply()的参数数组化来提高 JavaScript程序性能的技巧
2015/12/23 Javascript
使用getBoundingClientRect方法实现简洁的sticky组件的方法
2016/03/22 Javascript
探寻JavaScript中this指针指向
2016/04/23 Javascript
jQuery验证插件validate使用详解
2016/05/11 Javascript
JS常用函数和常用技巧小结
2016/10/15 Javascript
vue2.0获取自定义属性的值
2017/03/28 Javascript
js实现首屏延迟加载实现方法 js实现多屏单张图片延迟加载效果
2017/07/17 Javascript
关于vue编译版本引入的问题的解决
2018/09/17 Javascript
elementUI 设置input的只读或禁用的方法
2018/10/30 Javascript
Vue中多个元素、组件的过渡及列表过渡的方法示例
2019/02/13 Javascript
JS使用数组实现的队列功能示例
2019/03/04 Javascript
Vue CLI项目 axios模块前后端交互的使用(类似ajax提交)
2019/09/01 Javascript
使用localStorage替代cookie做本地存储
2019/09/25 Javascript
javascript网页随机点名实现过程解析
2019/10/15 Javascript
[49:54]Ti4 循环赛第三日 LGD vs Titan
2014/07/12 DOTA
python的类变量和成员变量用法实例教程
2014/08/25 Python
python中PS 图像调整算法原理之亮度调整
2019/06/28 Python
python django model联合主键的例子
2019/08/06 Python
python GUI库图形界面开发之PyQt5 Qt Designer工具(Qt设计师)详细使用方法及Designer ui文件转py文件方法
2020/02/26 Python
Python包资源下载路径报404解决方案
2020/11/05 Python
复古斯堪的纳维亚儿童服装:Baby go Retro
2017/09/09 全球购物
美国高档帽子网上商店:Hats.com
2018/08/09 全球购物
写自荐信要注意什么
2013/12/26 职场文书
护理个人求职信范文
2014/01/08 职场文书
2015年乡镇卫生院妇幼保健工作总结
2015/05/19 职场文书
祝福语集锦:送给毕业同学祝福语
2019/11/21 职场文书
Python装饰器的练习题
2021/11/23 Python
Apache Hudi数据布局黑科技降低一半查询时间
2022/03/31 Servers