JavaScript异步编程:异步数据收集的具体方法


Posted in Javascript onAugust 19, 2013

Asyncjs/seriesByHand.js

var fs = require('fs');
process.chdir('recipes'); // 改变工作目录
var concatenation = '';
fs.readdir('.', function(err, filenames) {
  if (err) throw err;
  function readFileAt(i) {
    var filename = filenames[i];
    fs.stat(filename, function(err, stats) {
      if (err) throw err;
      if (! stats.isFile()) return readFileAt(i + 1);
      fs.readFile(filename, 'utf8', function(err, text) {
        if (err) throw err;
        concatenation += text;
        if (i + 1 === filenames.length) {
          // 所有文件均已读取,可显示输出
          return console.log(concatenation);
        }
        readFileAt(i + 1);
      });
    });
  }
  readFileAt(0);
});

如你所见,异步版本的代码要比同步版本多很多。如果使用filter、forEach这些同步方法,代码的行数大约只有一半,而且读起来也要容易得多。如果这些漂亮的迭代器存在异步版本该多好啊!使用Async.js就能做到这一点!

 

何时抛出亦无妨?

大家可能注意到了,在上面那个代码示例中笔者无视了自己在第1.4节中提出的建议:从回调里抛出异常是一种糟糕的设计,尤其在成品环境中。不过,一个简单如斯的示例直接抛出异常则完全没有问题。如果真的遇到代码出错的意外情形,throw会关停代码并提供一个漂亮的堆栈轨迹来解释出错原因。

这里真正的不妥之处在于,同样的错误处理逻辑(即if(err) throw err)重复了多达3次!在4.2.2节,我们会看到Async.js如何帮助减少这种重复。

Async.js的函数式写法
我们想把同步迭代器所使用的filter和forEach方法替换成相应的异步方法。Async.js给了我们两个选择。

async.filter和async.forEach,它们会并行处理给定的数组。
async.filterSeries和async.forEachSeries,它们会顺序处理给定的数组。
并行运行这些异步操作应该会更快,那为什么还要使用序列式方法呢?原因有两个。

前面提到的工作流次序不可预知的问题。我们确实可以先把结果存储成数组,然后再joining(联接)数组来解决这个问题,但这毕竟多了一个步骤。
Node及其他任何应用进程能够同时读取的文件数量有一个上限。如果超过这个上限,操作系统就会报错。如果能顺序读取文件,则无需担心这一限制。
所以现在先搞明白async.forEachSeries再说。下面使用了Async.js的数据收集方法,直接改写了同步版本的代码实现。

Asyncjs/forEachSeries.js

var async = require('async');
var fs = require('fs');
process.chdir('recipes'); // 改变工作目录
var concatenation = '';
var dirContents = fs.readdirSync('.');
async.filter(dirContents, isFilename, function(filenames) {
  async.forEachSeries(filenames, readAndConcat, onComplete);
});
function isFilename(filename, callback) {
  fs.stat(filename, function(err, stats) {
    if (err) throw err;
    callback(stats.isFile());
  });
}
function readAndConcat(filename, callback) {
  fs.readFile(filename, 'utf8', function(err, fileContents) {
    if (err) return callback(err);
    concatenation += fileContents;
    callback();
  });
}
function onComplete(err) {
  if (err) throw err;
  console.log(concatenation);
}

现在我们的代码漂亮地分成了两个部分:任务概貌(表现形式为async.filter调用和async.forEachSeries调用)和实现细节(表现形式为两个迭代器函数和一个完工回调onComplete)。

filter和forEach并不是仅有的与标准函数式迭代方法相对应的Async.js工具函数。Async.js还提供了以下方法:

reject/rejectSeries,与filter刚好相反;
map/mapSeries,1:1变换;
reduce/reduceRight,值的逐步变换;
detect/detectSeries,找到筛选器匹配的值;
sortBy,产生一个有序副本;
some,测试是否至少有一个值符合给定标准;
every,测试是否所有值均符合给定标准。
这些方法是Async.js的精髓,令你能够以最低的代码重复度来执行常见的迭代工作。在继续探索更高级的方法之前,我们先来看看这些方法的错误处理技术。

Async.js的错误处理技术
要怪就怪Node的fs.exists首开这一先河吧!而这也意味着使用了Async.js数据收集方法(filter/filterSeries、reject/rejectSeries、detect/detectSeries、some、every等)的迭代器均无法报告错误。

对于非布尔型的所有Async.js迭代器,传递非null/undefined的值作为迭代器回调的首参数将会立即因该错误值而调用完工回调。这正是readAndConcat不用throw也能工作的原因。

Asyncjs/forEachSeries.js

function readAndConcat(filename, callback) {
  fs.readFile(filename, 'utf8', function(err, fileContents) {
    if (err) return callback(err);
    concatenation += fileContents;
    callback();
  });
}

所以,如果callback(err)确实是在readAndConcat中被调用的,则这个err会传递给完工回调(即onComplete)。Async.js只负责保证onComplete只被调用一次,而不管是因首次出错而调用,还是因成功完成所有操作而调用。

Asyncjs/forEachSeries.js

function onComplete(err) {
  if (err) throw err;
  console.log(concatenation);
}

Node的错误处理约定对Async.js数据收集方法而言也许并不理想,但对于Async.js的所有其他方法而言,遵守这些约定可以让错误干净利落地从各个任务流向完工回调。下一节会看到更多这样的例子。
Javascript 相关文章推荐
有趣的javascript数组定义方法
Sep 10 Javascript
js和jquery对dom节点的操作(创建/追加)
Apr 21 Javascript
flash调用js中的方法,让js传递变量给flash的办法及思路
Aug 07 Javascript
js实现省市联动效果的简单实例
Feb 10 Javascript
js实现搜索框关键字智能匹配代码
Mar 26 Javascript
学习JavaScript设计模式之享元模式
Jan 18 Javascript
AngularJS执行流程详解
Feb 17 Javascript
深入浅析Vue.js中 computed和methods不同机制
Mar 22 Javascript
详解Vue SSR( Vue2 + Koa2 + Webpack4)配置指南
Nov 13 Javascript
微信小程序API—获取定位的详解
Apr 30 Javascript
JavaScript从原型到原型链深入理解
Jun 03 Javascript
微信小程序下拉框搜索功能的实现方法
Jul 31 Javascript
文本框中禁止非数字字符输入比如手机号码、邮编
Aug 19 #Javascript
JQUERY 获取IFrame中对象及获取其父窗口中对象示例
Aug 19 #Javascript
时间戳转换为时间 年月日时间的JS函数
Aug 19 #Javascript
详解JavaScript函数绑定
Aug 18 #Javascript
jQuery 绑定事件到动态创建的元素上的方法实例
Aug 18 #Javascript
jQuery焦点图切换特效插件封装实例
Aug 18 #Javascript
JavaScript生成GUID的多种算法小结
Aug 18 #Javascript
You might like
数据库相关问题
2006/10/09 PHP
php 文件上传实例代码
2012/04/19 PHP
关于PHP 如何用 curl 读取 HTTP chunked 数据
2016/02/26 PHP
PHP连接MySQL数据库操作代码实例解析
2020/07/11 PHP
自适应图片大小的弹出窗口
2006/07/27 Javascript
JavaScript中常见的字符串操作函数及用法汇总
2015/05/04 Javascript
JavaScript每天定时更换皮肤样式的方法
2015/07/01 Javascript
浅析JavaScript中命名空间namespace模式
2016/06/22 Javascript
ES6新特性之类(Class)和继承(Extends)相关概念与用法分析
2017/05/24 Javascript
jQuery层级选择器_动力节点节点Java学院整理
2017/07/04 jQuery
vue的全局变量和全局拦截请求器的示例代码
2018/09/13 Javascript
JS 数组基本用法入门示例解析
2020/01/16 Javascript
微信小程序实现简单文字跑马灯
2020/05/26 Javascript
python 判断一个进程是否存在
2009/04/09 Python
python字符串的常用操作方法小结
2016/05/21 Python
Python输出带颜色的字符串实例
2017/10/10 Python
Odoo中如何生成唯一不重复的序列号详解
2018/02/10 Python
浅谈flask源码之请求过程
2018/07/26 Python
使用python对excle和json互相转换的示例
2018/10/23 Python
Python自定义一个异常类的方法
2019/06/27 Python
python常用库之NumPy和sklearn入门
2019/07/11 Python
Python3爬虫中Splash的知识总结
2020/07/10 Python
pip/anaconda修改镜像源,加快python模块安装速度的操作
2021/03/04 Python
HTML5 Video标签的属性、方法和事件汇总介绍
2015/04/24 HTML / CSS
Bluebella美国官网:英国性感内衣品牌
2018/10/04 全球购物
美国花园雕像和家居装饰网上商店:Design Toscano
2019/03/09 全球购物
Noon埃及:埃及在线购物
2019/11/26 全球购物
美国购买舞会礼服网站:Couture Candy
2019/12/29 全球购物
幼儿园消防演练方案
2014/02/13 职场文书
物控部经理职务说明书
2014/02/25 职场文书
博士毕业生自我鉴定范文
2014/04/13 职场文书
晋江市委常委班子四风问题整改工作方案
2014/10/26 职场文书
2015年幼儿园卫生保健工作总结
2015/05/12 职场文书
小学运动会通讯稿
2015/07/18 职场文书
python实现过滤敏感词
2021/05/08 Python
如何避免mysql启动时错误及sock文件作用分析
2022/01/22 MySQL