nodejs中实现阻塞实例


Posted in NodeJs onMarch 24, 2015

node.js中与生俱来的单线程编程、回调函数异步式风格让我们有时喜有时忧。先说单线程,很多人会费解于node.js的单线程如何能做到高并发?这个问题不是本文重点,点到为止。澄清一点,node.js的单线程仅仅指javascript引擎是单线程的,无论如何我们没有办法在javascript中实现多线程和阻塞(本文用到的方法同样不是通过V8引擎实现同步的);但对于node.js的其他方面不代表不能多线程,例如IO。如果现在node.js遭受大量请求,而这些请求都是IO密集型的,那么此时node每接受一个请求,在遇到耗时较长的IO操作时,javascript线程并不会一直在此等待,而是交出控制,在回调堆栈里添加IO操作完成后要执行的操作(当回调层级过多,访问数量过大,大量的回调链可能会爆栈)。而在这段时间内,node.js又可以处理其他请求了。所以对于node.js而言,虽然javascript是单线程的,每次只能处理一个请求,但javascript处理一个请求的时间往往较短(对于IO密集型应用而言),只要可以异步处理,那么在处理的过程中,此次请求都会释放控制,使node.js能处理其他请求。这并发请求的同时,IO其实一直处于并发状态,减少处理请求的线程数,节约资源以增加IO的线程数,对于通常耗时很长的IO密集型请求来说,无疑能带来性能上的提升。

前面???锣碌匾恢痹谇康?O密集型,其实是在强调node.js的强项。相应的,它的短板就是CPU密集型的请求。道理很简单,javascript不会并发,只能一个请求完成后才能处理其他请求。一个请求处理的时间越长,其他请求等待的时间越长。同一时间只会有一个请求被处理,并发性能很低。

话说到这儿,我想申明一点:node.js不应该被阻塞;能异步处理的方法异步处理(如使用fs.readFile(),而非fs.syncReadFile()fs.readFileSync()方法)。

node中不能阻塞,并不代表node外不能阻塞。前面我们有讲到fibers,现在,我们就来尝试在fibers中实现阻塞。就以处理一个http请求为例吧:

var Fiber = require('fibers');

var http = require("http");

Fiber(function () {

    var httpFiber = Fiber.current;

    var html = "";

    http.get("http://www.baidu.com", function (res) {

        var dataFiber = Fiber.current;

        res.on("data", function (data) {

            html += data;

        });

        res.on("end", function (data) {

            httpFiber.run();

        });

    });

    Fiber.yield();

    console.log(html);

}).run();

yield()、 run()这两个方法还不了解的同学,请自行查阅《fibers in node》。

fibers的运行并不在node进程中,所以在fibers内部实现阻塞对node整体的性能并没有影响。而且实现起来也是相当容易,只需要在想阻塞的时候,把fiber yield掉。需要继续运行,则执行 run()恢复fiber。在上面的例子中,我们希望当http.get请求发起时阻塞当前程序,当所有数据接收完成时,恢复程序。于是我们在调用http.get后使用 Fiber.yield()中断此fiber。在对response的监听中,如果触发 end事件表明数据传输完成,于是在 end的回调函数中,调用 Fiber.current.run()恢复fiber,这样,后续的代码就以同步的方式拿到http.get请求的数据。

上面的示例只是提供一种思路。如果对这种思路进行一些抽象封装,比如说,对有接受回调函数为参数的异步方法进行一步柯里化,在调用后中断,并劫持回调函数,以恢复程序的代码为回调函数。获取异步数据后,再程序触发预定的回调函数,这样基本能实现异步方法同步化。这段说得比较乱,基本上就是 fibers/future的实现思路,如果有兴趣,请参考其源代码。

NodeJs 相关文章推荐
利用NodeJS和PhantomJS抓取网站页面信息以及网站截图
Nov 18 NodeJs
基于NodeJS的前后端分离的思考与实践(一)全栈式开发
Sep 26 NodeJs
详谈nodejs异步编程
Dec 04 NodeJs
Nodejs学习笔记之测试驱动
Apr 16 NodeJs
NodeJs中的VM模块详解
May 06 NodeJs
nodejs 的 session 简单使用
Jun 06 NodeJs
基于Nodejs利用socket.io实现多人聊天室
Feb 22 NodeJs
详谈Angular路由与Nodejs路由的区别
Mar 05 NodeJs
nodejs基于mssql模块连接sqlserver数据库的简单封装操作示例
Jan 05 NodeJs
nodejs多版本管理总结
Apr 03 NodeJs
nodejs 生成和导出 word的实例代码
Jul 31 NodeJs
NodeJS实现自定义流的方法
Aug 01 NodeJs
nodejs中使用多线程编程的方法实例
Mar 24 #NodeJs
nodejs中实现sleep功能实例
Mar 24 #NodeJs
nodejs中的fiber(纤程)库详解
Mar 24 #NodeJs
nodeJS代码实现计算交社保是否合适
Mar 09 #NodeJs
Nodejs关于gzip/deflate压缩详解
Mar 04 #NodeJs
nodejs URL模块操作URL相关方法介绍
Mar 03 #NodeJs
Windows系统中安装nodejs图文教程
Feb 28 #NodeJs
You might like
thinkphp特殊标签用法概述
2014/11/24 PHP
yii2使用ajax返回json的实现方法
2016/05/14 PHP
PHP实现的一致性Hash算法详解【分布式算法】
2018/03/31 PHP
php 使用mpdf实现指定字段配置字体样式的方法
2019/07/29 PHP
php7 错误处理机制修改实例分析
2020/05/25 PHP
jquery获取input的value问题说明
2010/08/19 Javascript
ASP.NET jQuery 实例3 (在TextBox里面阻止复制、剪切和粘贴事件)
2012/01/13 Javascript
jquery插件制作简单示例说明
2012/02/03 Javascript
javascript基础知识大全 便于大家学习,也便于我自己查看
2012/08/17 Javascript
使用jQuery仿苹果官网焦点图特效
2014/12/23 Javascript
不同编码的页面表单数据乱码问题解决方法
2015/02/15 Javascript
js实现正则匹配中文标点符号的方法
2015/12/23 Javascript
Vue项目全局配置页面缓存之按需读取缓存的实现详解
2018/08/01 Javascript
深入理解JavaScript 中的匿名函数((function() {})();)与变量的作用域
2018/08/28 Javascript
vue 源码解析之虚拟Dom-render
2019/08/26 Javascript
vue:el-input输入时限制输入的类型操作
2020/08/05 Javascript
[01:07:11]Secret vs Newbee 2019国际邀请赛小组赛 BO2 第二场 8.15
2019/08/17 DOTA
Python完全新手教程
2007/02/08 Python
跟老齐学Python之??碌某?? target=
2014/09/12 Python
Python3读取文件常用方法实例分析
2015/05/22 Python
Python基于Tkinter的HelloWorld入门实例
2015/06/17 Python
Python实现比较扑克牌大小程序代码示例
2017/12/06 Python
利用Python批量提取Win10锁屏壁纸实战教程
2018/03/27 Python
用python处理图片实现图像中的像素访问
2018/05/04 Python
python实现判断一个字符串是否是合法IP地址的示例
2018/06/04 Python
Python 合并多个TXT文件并统计词频的实现
2019/08/23 Python
Python常用数字处理基本操作汇总
2020/09/10 Python
jupyter notebook更换皮肤主题的实现
2021/01/07 Python
CSS3 实现的缩略图悬停效果
2020/12/09 HTML / CSS
eBay德国站:eBay.de
2017/09/14 全球购物
市场策划求职信
2014/08/07 职场文书
课前一分钟演讲稿
2014/08/26 职场文书
王亚平太空授课观后感
2015/06/12 职场文书
《玩出了名堂》教学反思
2016/02/17 职场文书
MySQL 视图(View)原理解析
2021/05/19 MySQL
mysql 8.0.27 绿色解压版安装教程及配置方法
2022/04/20 MySQL