nodejs中实现阻塞实例


Posted in NodeJs onMarch 24, 2015

node.js中与生俱来的单线程编程、回调函数异步式风格让我们有时喜有时忧。先说单线程,很多人会费解于node.js的单线程如何能做到高并发?这个问题不是本文重点,点到为止。澄清一点,node.js的单线程仅仅指javascript引擎是单线程的,无论如何我们没有办法在javascript中实现多线程和阻塞(本文用到的方法同样不是通过V8引擎实现同步的);但对于node.js的其他方面不代表不能多线程,例如IO。如果现在node.js遭受大量请求,而这些请求都是IO密集型的,那么此时node每接受一个请求,在遇到耗时较长的IO操作时,javascript线程并不会一直在此等待,而是交出控制,在回调堆栈里添加IO操作完成后要执行的操作(当回调层级过多,访问数量过大,大量的回调链可能会爆栈)。而在这段时间内,node.js又可以处理其他请求了。所以对于node.js而言,虽然javascript是单线程的,每次只能处理一个请求,但javascript处理一个请求的时间往往较短(对于IO密集型应用而言),只要可以异步处理,那么在处理的过程中,此次请求都会释放控制,使node.js能处理其他请求。这并发请求的同时,IO其实一直处于并发状态,减少处理请求的线程数,节约资源以增加IO的线程数,对于通常耗时很长的IO密集型请求来说,无疑能带来性能上的提升。

前面???锣碌匾恢痹谇康?O密集型,其实是在强调node.js的强项。相应的,它的短板就是CPU密集型的请求。道理很简单,javascript不会并发,只能一个请求完成后才能处理其他请求。一个请求处理的时间越长,其他请求等待的时间越长。同一时间只会有一个请求被处理,并发性能很低。

话说到这儿,我想申明一点:node.js不应该被阻塞;能异步处理的方法异步处理(如使用fs.readFile(),而非fs.syncReadFile()fs.readFileSync()方法)。

node中不能阻塞,并不代表node外不能阻塞。前面我们有讲到fibers,现在,我们就来尝试在fibers中实现阻塞。就以处理一个http请求为例吧:

var Fiber = require('fibers');

var http = require("http");

Fiber(function () {

    var httpFiber = Fiber.current;

    var html = "";

    http.get("http://www.baidu.com", function (res) {

        var dataFiber = Fiber.current;

        res.on("data", function (data) {

            html += data;

        });

        res.on("end", function (data) {

            httpFiber.run();

        });

    });

    Fiber.yield();

    console.log(html);

}).run();

yield()、 run()这两个方法还不了解的同学,请自行查阅《fibers in node》。

fibers的运行并不在node进程中,所以在fibers内部实现阻塞对node整体的性能并没有影响。而且实现起来也是相当容易,只需要在想阻塞的时候,把fiber yield掉。需要继续运行,则执行 run()恢复fiber。在上面的例子中,我们希望当http.get请求发起时阻塞当前程序,当所有数据接收完成时,恢复程序。于是我们在调用http.get后使用 Fiber.yield()中断此fiber。在对response的监听中,如果触发 end事件表明数据传输完成,于是在 end的回调函数中,调用 Fiber.current.run()恢复fiber,这样,后续的代码就以同步的方式拿到http.get请求的数据。

上面的示例只是提供一种思路。如果对这种思路进行一些抽象封装,比如说,对有接受回调函数为参数的异步方法进行一步柯里化,在调用后中断,并劫持回调函数,以恢复程序的代码为回调函数。获取异步数据后,再程序触发预定的回调函数,这样基本能实现异步方法同步化。这段说得比较乱,基本上就是 fibers/future的实现思路,如果有兴趣,请参考其源代码。

NodeJs 相关文章推荐
nodejs的require模块(文件模块/核心模块)及路径介绍
Jan 14 NodeJs
nodejs中使用多线程编程的方法实例
Mar 24 NodeJs
Nodejs爬虫进阶教程之异步并发控制
Feb 15 NodeJs
Nodejs如何搭建Web服务器
Mar 28 NodeJs
NodeJS仿WebApi路由示例
Feb 28 NodeJs
nodejs获取微信小程序带参数二维码实现代码
Apr 12 NodeJs
nodejs开发微信小程序实现密码加密
Jul 11 NodeJs
让nodeJS支持ES6的词法----babel的安装和使用方法
Jul 31 NodeJs
nodejs操作mongodb的填删改查模块的制作及引入实例
Jan 02 NodeJs
nodeJs爬虫的技术点总结
May 13 NodeJs
nodejs图片处理工具gm用法小结
Dec 12 NodeJs
Sublime Text3 配置 NodeJs 环境的方法
May 20 NodeJs
nodejs中使用多线程编程的方法实例
Mar 24 #NodeJs
nodejs中实现sleep功能实例
Mar 24 #NodeJs
nodejs中的fiber(纤程)库详解
Mar 24 #NodeJs
nodeJS代码实现计算交社保是否合适
Mar 09 #NodeJs
Nodejs关于gzip/deflate压缩详解
Mar 04 #NodeJs
nodejs URL模块操作URL相关方法介绍
Mar 03 #NodeJs
Windows系统中安装nodejs图文教程
Feb 28 #NodeJs
You might like
基于wordpress主题制作的具体实现步骤
2013/05/10 PHP
使用迭代器 遍历文件信息的详解
2013/06/08 PHP
php中的静态变量的基本用法
2014/03/20 PHP
php编写的一个E-mail验证类
2015/03/25 PHP
PHP简单实现上一页下一页功能示例
2016/09/14 PHP
thinkphp整合微信支付代码分享
2016/11/24 PHP
PHP iconv()函数字符编码转换的问题讲解
2019/03/22 PHP
JQuery 动画卷页 返回顶部 动画特效(兼容Chrome)
2010/02/15 Javascript
date.parse在IE和FF中的区别
2010/07/29 Javascript
精心挑选的15款优秀jQuery 本特效插件和教程
2012/08/06 Javascript
模拟多级复选框效果的jquery代码
2013/08/13 Javascript
javascript中parseInt()函数的定义和用法分析
2014/12/20 Javascript
javascript实现全角与半角字符的转换
2015/01/07 Javascript
javascript实现 百度翻译 可折叠的分享按钮列表
2015/03/12 Javascript
JS表格组件神器bootstrap table详解(强化版)
2016/05/26 Javascript
AngularJS中的缓存使用
2017/01/11 Javascript
nodeJS实现简单网页爬虫功能的实例(分享)
2017/06/08 NodeJs
JS实现基于Sketch.js模拟成群游动的蝌蚪运动动画效果【附demo源码下载】
2017/08/18 Javascript
vue基于element-ui的三级CheckBox复选框功能的实现代码
2018/10/15 Javascript
详解vue几种主动刷新的方法总结
2019/02/19 Javascript
微信小程序发布新版本时自动提示用户更新的方法
2019/06/07 Javascript
vue的注意规范之v-if 与 v-for 一起使用教程
2019/08/04 Javascript
使用jquery实现轮播图效果
2021/01/02 jQuery
Python闭包实现计数器的方法
2015/05/05 Python
Numpy数组的保存与读取方法
2018/04/04 Python
Python global全局变量函数详解
2018/09/18 Python
django框架两个使用模板实例
2019/12/11 Python
Python sorted对list和dict排序
2020/06/09 Python
CSS3 @media的基本用法总结
2019/09/10 HTML / CSS
车间副主任岗位职责
2013/12/24 职场文书
校庆活动方案
2014/03/31 职场文书
生活部的活动方案
2014/08/19 职场文书
重阳节活动主持词
2015/07/04 职场文书
最新的离婚协议书范本!
2019/07/02 职场文书
SQL IDENTITY_INSERT作用案例详解
2021/08/23 MySQL
MySQL解决Navicat设置默认字符串时的报错问题
2022/06/16 MySQL