JavaScript异步编程:异步数据收集的具体方法


Posted in Javascript onAugust 19, 2013

Asyncjs/seriesByHand.js

var fs = require('fs');
process.chdir('recipes'); // 改变工作目录
var concatenation = '';
fs.readdir('.', function(err, filenames) {
  if (err) throw err;
  function readFileAt(i) {
    var filename = filenames[i];
    fs.stat(filename, function(err, stats) {
      if (err) throw err;
      if (! stats.isFile()) return readFileAt(i + 1);
      fs.readFile(filename, 'utf8', function(err, text) {
        if (err) throw err;
        concatenation += text;
        if (i + 1 === filenames.length) {
          // 所有文件均已读取,可显示输出
          return console.log(concatenation);
        }
        readFileAt(i + 1);
      });
    });
  }
  readFileAt(0);
});

如你所见,异步版本的代码要比同步版本多很多。如果使用filter、forEach这些同步方法,代码的行数大约只有一半,而且读起来也要容易得多。如果这些漂亮的迭代器存在异步版本该多好啊!使用Async.js就能做到这一点!

 

何时抛出亦无妨?

大家可能注意到了,在上面那个代码示例中笔者无视了自己在第1.4节中提出的建议:从回调里抛出异常是一种糟糕的设计,尤其在成品环境中。不过,一个简单如斯的示例直接抛出异常则完全没有问题。如果真的遇到代码出错的意外情形,throw会关停代码并提供一个漂亮的堆栈轨迹来解释出错原因。

这里真正的不妥之处在于,同样的错误处理逻辑(即if(err) throw err)重复了多达3次!在4.2.2节,我们会看到Async.js如何帮助减少这种重复。

Async.js的函数式写法
我们想把同步迭代器所使用的filter和forEach方法替换成相应的异步方法。Async.js给了我们两个选择。

async.filter和async.forEach,它们会并行处理给定的数组。
async.filterSeries和async.forEachSeries,它们会顺序处理给定的数组。
并行运行这些异步操作应该会更快,那为什么还要使用序列式方法呢?原因有两个。

前面提到的工作流次序不可预知的问题。我们确实可以先把结果存储成数组,然后再joining(联接)数组来解决这个问题,但这毕竟多了一个步骤。
Node及其他任何应用进程能够同时读取的文件数量有一个上限。如果超过这个上限,操作系统就会报错。如果能顺序读取文件,则无需担心这一限制。
所以现在先搞明白async.forEachSeries再说。下面使用了Async.js的数据收集方法,直接改写了同步版本的代码实现。

Asyncjs/forEachSeries.js

var async = require('async');
var fs = require('fs');
process.chdir('recipes'); // 改变工作目录
var concatenation = '';
var dirContents = fs.readdirSync('.');
async.filter(dirContents, isFilename, function(filenames) {
  async.forEachSeries(filenames, readAndConcat, onComplete);
});
function isFilename(filename, callback) {
  fs.stat(filename, function(err, stats) {
    if (err) throw err;
    callback(stats.isFile());
  });
}
function readAndConcat(filename, callback) {
  fs.readFile(filename, 'utf8', function(err, fileContents) {
    if (err) return callback(err);
    concatenation += fileContents;
    callback();
  });
}
function onComplete(err) {
  if (err) throw err;
  console.log(concatenation);
}

现在我们的代码漂亮地分成了两个部分:任务概貌(表现形式为async.filter调用和async.forEachSeries调用)和实现细节(表现形式为两个迭代器函数和一个完工回调onComplete)。

filter和forEach并不是仅有的与标准函数式迭代方法相对应的Async.js工具函数。Async.js还提供了以下方法:

reject/rejectSeries,与filter刚好相反;
map/mapSeries,1:1变换;
reduce/reduceRight,值的逐步变换;
detect/detectSeries,找到筛选器匹配的值;
sortBy,产生一个有序副本;
some,测试是否至少有一个值符合给定标准;
every,测试是否所有值均符合给定标准。
这些方法是Async.js的精髓,令你能够以最低的代码重复度来执行常见的迭代工作。在继续探索更高级的方法之前,我们先来看看这些方法的错误处理技术。

Async.js的错误处理技术
要怪就怪Node的fs.exists首开这一先河吧!而这也意味着使用了Async.js数据收集方法(filter/filterSeries、reject/rejectSeries、detect/detectSeries、some、every等)的迭代器均无法报告错误。

对于非布尔型的所有Async.js迭代器,传递非null/undefined的值作为迭代器回调的首参数将会立即因该错误值而调用完工回调。这正是readAndConcat不用throw也能工作的原因。

Asyncjs/forEachSeries.js

function readAndConcat(filename, callback) {
  fs.readFile(filename, 'utf8', function(err, fileContents) {
    if (err) return callback(err);
    concatenation += fileContents;
    callback();
  });
}

所以,如果callback(err)确实是在readAndConcat中被调用的,则这个err会传递给完工回调(即onComplete)。Async.js只负责保证onComplete只被调用一次,而不管是因首次出错而调用,还是因成功完成所有操作而调用。

Asyncjs/forEachSeries.js

function onComplete(err) {
  if (err) throw err;
  console.log(concatenation);
}

Node的错误处理约定对Async.js数据收集方法而言也许并不理想,但对于Async.js的所有其他方法而言,遵守这些约定可以让错误干净利落地从各个任务流向完工回调。下一节会看到更多这样的例子。
Javascript 相关文章推荐
jquery ui dialog里调用datepicker的问题
Aug 06 Javascript
js 文件引入实现代码
Apr 23 Javascript
Javascript原型链的原理详解
Jan 05 Javascript
超链接怎么正确调用javascript函数
May 23 Javascript
浅谈JS继承_借用构造函数 & 组合式继承
Aug 16 Javascript
mui back 返回刷新页面的实例
Dec 06 Javascript
JS实现点击下拉菜单把选择的内容同步到input输入框内的实例
Jan 23 Javascript
详解 微信小程序开发框架(MINA)
May 17 Javascript
JS实现页面数据懒加载
Feb 13 Javascript
深入浅析golang zap 日志库使用(含文件切割、分级别存储和全局使用等)
Feb 19 Javascript
js实现表格数据搜索
Aug 09 Javascript
vue+echarts实现动态折线图的方法与注意
Sep 01 Javascript
文本框中禁止非数字字符输入比如手机号码、邮编
Aug 19 #Javascript
JQUERY 获取IFrame中对象及获取其父窗口中对象示例
Aug 19 #Javascript
时间戳转换为时间 年月日时间的JS函数
Aug 19 #Javascript
详解JavaScript函数绑定
Aug 18 #Javascript
jQuery 绑定事件到动态创建的元素上的方法实例
Aug 18 #Javascript
jQuery焦点图切换特效插件封装实例
Aug 18 #Javascript
JavaScript生成GUID的多种算法小结
Aug 18 #Javascript
You might like
php array_slice函数的使用以及参数详解
2008/08/30 PHP
php学习之简单计算器实现代码
2011/06/09 PHP
非常实用的PHP常用函数汇总
2014/12/17 PHP
PHP+MYSQL中文乱码问题
2015/07/01 PHP
php实现的二叉树遍历算法示例
2017/06/15 PHP
Laravel 手动开关 Eloquent 修改器的操作方法
2019/12/30 PHP
js showModalDialog参数的使用详解
2014/01/07 Javascript
JavaScript将当前时间转换成UTC标准时间的方法
2015/04/06 Javascript
require.js+vue开发微信上传图片组件
2016/10/27 Javascript
前端开发必知的15个jQuery小技巧
2017/01/22 Javascript
bootstrap日期插件daterangepicker使用详解
2017/10/19 Javascript
vue.js input框之间赋值方法
2018/08/24 Javascript
angularjs获取到My97DatePicker选中的值方法
2018/10/02 Javascript
Vue.js标签页组件使用方法详解
2019/10/19 Javascript
vue 封装 Adminlte3组件的实现
2020/03/18 Javascript
python通过floor函数舍弃小数位的方法
2015/03/17 Python
Python常用随机数与随机字符串方法实例
2015/04/09 Python
浅谈Python中的数据类型
2015/05/05 Python
Python中is与==判断的区别
2017/03/28 Python
numpy数组拼接简单示例
2017/12/15 Python
Python读取视频的两种方法(imageio和cv2)
2018/04/15 Python
python整合ffmpeg实现视频文件的批量转换
2019/05/31 Python
python numpy之np.random的随机数函数使用介绍
2019/10/06 Python
python3 sorted 如何实现自定义排序标准
2020/03/12 Python
python脚本监控logstash进程并邮件告警实例
2020/04/28 Python
Speedo速比涛德国官方网站:世界领先的泳装品牌
2019/08/26 全球购物
副科级后备干部考察材料
2014/05/15 职场文书
教师党员岗位承诺书
2014/05/29 职场文书
小学教师师德师风自我剖析材料
2014/09/29 职场文书
房产协议书范本2014
2014/09/30 职场文书
老舍《猫》教学反思
2016/02/17 职场文书
《打电话》教学反思
2016/02/22 职场文书
在HTML5 localStorage中存储对象的示例代码
2021/04/21 Javascript
Django操作cookie的实现
2021/05/26 Python
恶魔之树最顶端的三颗果实 震震果实上榜,第一可以制造岩浆
2022/03/18 日漫
Python实现信息管理系统
2022/06/05 Python