jQuery webuploader分片上传大文件


Posted in Javascript onNovember 07, 2016

一般在做文件上传的时候,都是通过客户端把要上传的文件上传到服务器,此时上传的文件都在服务器内存,如果上传的是视频等大文件,那么服务器内存就很紧张,而且一般我们都是用flash或者html5做异步上传,如果文件比较大的话,即便是客户端显示文件已经上传了100%,还是会有一个比较长时间的等待,而且当前页面对服务器的请求也会被阻塞。

正常情况下,一般都是在长传完成后,在服务器直接保存。

public void ProcessRequest(HttpContext context)
  {
   context.Response.ContentType = "text/plain";
   //保存文件
   context.Request.Files[0].SaveAs(context.Server.MapPath("~/1/" + context.Request.Files[0].FileName));
   context.Response.Write("Hello World");
  }

最近项目中用百度开源的上传组件webuploader,官方介绍webuploader支持分片上传。具体webuploader的使用方法见官网http://fex.baidu.com/webuploader/。

var uploader = WebUploader.create({
   auto: true,
   swf:'/webuploader/Uploader.swf',
   // 文件接收服务端。
   server: '/Uploader.ashx',
   // 内部根据当前运行是创建,可能是input元素,也可能是flash.
   pick: '#filePicker',
   chunked: true,//开启分片上传
   threads: 1,//上传并发数
   //由于Http的无状态特征,在往服务器发送数据过程传递一个进入当前页面是生成的GUID作为标示
   formData: {guid:"<%=Guid.NewGuid().ToString()%>"}
  });

webuploader的分片上传是把文件分成若干份,然后向你定义的文件接收端post数据,如果上传的文件大于分片的尺寸,就会进行分片,然后会在post的数据中添加两个form元素chunk和chunks,前者标示当前分片在上传分片中的顺序(从0开始),后者代表总分片数。

选择一个文件后分了7个分片,所以对Uploader.ashx进行了7次post数据的过程。

jQuery webuploader分片上传大文件

每次请求中的form元素chunk和chunks以及为了标示是同一个文件的分片的GUID

 jQuery webuploader分片上传大文件

在服务器端接收到数据后,就可以根据这些参数进行处理了。

1、按按GUID创建一个临时文件

2、把收到的分片数据追加到对应GUID的文件中。

3、根据上传的文件名重命名临时文件

4、如果没有分片直接保存

public void ProcessRequest(HttpContext context)
  {
   context.Response.ContentType = "text/plain";
   //如果进行了分片
   if (context.Request.Form.AllKeys.Any(m => m == "chunk"))
   {
    //取得chunk和chunks
    int chunk =Convert.ToInt32(context.Request.Form["chunk"]);
    int chunks = Convert.ToInt32(context.Request.Form["chunks"]);

    
    //根据GUID创建用该GUID命名的临时文件
    string path = context.Server.MapPath("~/1/" + context.Request["guid"]);
    FileStream addFile = new FileStream(path, FileMode.Append, FileAccess.Write);
    BinaryWriter AddWriter = new BinaryWriter(addFile);
    //获得上传的分片数据流
    HttpPostedFile file = context.Request.Files[0];
    Stream stream = file.InputStream;

    BinaryReader TempReader = new BinaryReader(stream);
    //将上传的分片追加到临时文件末尾
    AddWriter.Write(TempReader.ReadBytes((int)stream.Length));
    //关闭BinaryReader文件阅读器
    TempReader.Close();
    stream.Close();
    AddWriter.Close();
    addFile.Close();

    TempReader.Dispose();
    stream.Dispose();
    AddWriter.Dispose();
    addFile.Dispose();
    //如果是最后一个分片,则重命名临时文件为上传的文件名
    if (chunk == (chunks - 1))
    {
     FileInfo fileinfo = new FileInfo(path);
     fileinfo.MoveTo(context.Server.MapPath("~/1/" + context.Request.Files[0].FileName));
    }
   }
   else//没有分片直接保存
   {
    context.Request.Files[0].SaveAs(context.Server.MapPath("~/1/" + context.Request.Files[0].FileName ));
   }
   context.Response.Write("ok");
  }

还存在一些问题没解决,虽然暂时满足需求:

1、如果上传并发超过1个的时候,就会出现一个分片上传服务器还没处理结束,第二个分片同时就到了,那样就会出现文件被占用的错误。
2、如果加锁的办法解决第一个问题,那加锁了就肯定会影响效率(同时只有一个进程能访问保存文件那段代码)。
3、文件的顺序问题,有个可能是第二个分片先到,然后第一个才到,那么就不能一次追加流到临时文件了,只能创建多个临时文件,待所有分片上传完成后,拼接成一个文件。

只是个Demo,希望有人帮助解决下存在的问题。

更多精彩内容,请点击《jQuery上传操作汇总》,进行深入学习和研究。

以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持三水点靠木。

Javascript 相关文章推荐
javascript 写类方式之三
Jul 05 Javascript
window.parent调用父框架时 ie跟火狐不兼容问题
Jul 30 Javascript
jquery 与NVelocity 产生冲突的解决方法
Jun 13 Javascript
jQuery源码分析-03构造jQuery对象-源码结构和核心函数
Nov 14 Javascript
jQuery实现表头固定效果的实例代码
May 24 Javascript
JavaScript将数据转换成整数的方法
Jan 04 Javascript
Javascript字符串浏览器兼容问题分析
Dec 01 Javascript
Angularjs 创建可复用组件实例代码
Oct 09 Javascript
简单了解JavaScript异步
May 23 Javascript
Vuex 模块化使用详解
Jul 31 Javascript
解决layer 动态加载select 失效的问题
Sep 18 Javascript
ant design pro中可控的筛选和排序实例
Nov 17 Javascript
快速掌握jQuery插件WebUploader文件上传
Nov 07 #Javascript
jquery.validate表单验证插件使用方法解析
Nov 07 #Javascript
功能强大的jquery.validate表单验证插件
Nov 07 #Javascript
JS 实现Base64编码与解码实例详解
Nov 07 #Javascript
百度多文件异步上传控件webuploader基本用法解析
Nov 07 #Javascript
Angularjs的Controller间通信机制实例分析
Nov 07 #Javascript
jquery组件WebUploader文件上传用法详解
Oct 23 #Javascript
You might like
PHP 自定义错误处理函数的使用详解
2013/05/10 PHP
PHP不用第三变量交换2个变量的值的解决方法
2013/06/02 PHP
php检测url是否存在的方法
2015/04/14 PHP
PHP-FPM之Chroot执行环境详解
2015/08/03 PHP
POST一个JSON格式的数据给Restful服务实例详解
2017/04/07 PHP
php readfile()修改文件上传大小设置
2017/08/11 PHP
父元素与子iframe相互获取变量和元素对象的具体实现
2013/10/15 Javascript
Node.js开源应用框架HapiJS介绍
2015/01/14 Javascript
javascript判断并获取注册表中可信任站点的方法
2015/06/01 Javascript
JS文字球状放大效果代码分享
2015/08/19 Javascript
整理关于Bootstrap模态弹出框的慕课笔记
2017/03/29 Javascript
最通俗易懂的javascript变量提升详解
2017/08/05 Javascript
AngularJS实现的根据数量与单价计算总价功能示例
2017/12/26 Javascript
vue项目打包后打开页面空白解决办法
2018/06/29 Javascript
vue使用监听实现全选反选功能
2018/07/06 Javascript
微信小程序实现下拉刷新动画
2019/06/21 Javascript
小程序表单认证布局及验证详解
2020/06/19 Javascript
[04:29]2014DOTA2国际邀请赛 主赛事第三日TOPPLAY
2014/07/21 DOTA
[00:32]2018DOTA2亚洲邀请赛EG出场
2018/04/03 DOTA
[01:48]帕吉至宝加入游戏,遗迹战场现“千劫神屠”
2018/04/07 DOTA
Windows下使Python2.x版本的解释器与3.x共存的方法
2015/10/25 Python
Google开源的Python格式化工具YAPF的安装和使用教程
2016/05/31 Python
用yum安装MySQLdb模块的步骤方法
2016/12/15 Python
python判断字符串是否是json格式方法分享
2017/11/07 Python
解决安装tensorflow遇到无法卸载numpy 1.8.0rc1的问题
2018/06/13 Python
10行Python代码计算汽车数量的实现方法
2019/10/23 Python
PyQt5中多线程模块QThread使用方法的实现
2020/01/31 Python
Pycharm的Available Packages为空的解决方法
2020/09/18 Python
Brasty罗马尼亚:购买手表、香水、化妆品、珠宝
2020/04/21 全球购物
小班重阳节活动方案
2014/02/08 职场文书
学校安全教育月活动总结
2014/07/07 职场文书
教师作风整改措施思想汇报
2014/10/12 职场文书
后备干部推荐材料
2014/12/24 职场文书
离婚起诉书范本
2015/05/18 职场文书
焦点访谈观后感
2015/06/11 职场文书
详细谈谈JavaScript中循环之间的差异
2021/08/23 Javascript