nodejs中实现阻塞实例


Posted in NodeJs onMarch 24, 2015

node.js中与生俱来的单线程编程、回调函数异步式风格让我们有时喜有时忧。先说单线程,很多人会费解于node.js的单线程如何能做到高并发?这个问题不是本文重点,点到为止。澄清一点,node.js的单线程仅仅指javascript引擎是单线程的,无论如何我们没有办法在javascript中实现多线程和阻塞(本文用到的方法同样不是通过V8引擎实现同步的);但对于node.js的其他方面不代表不能多线程,例如IO。如果现在node.js遭受大量请求,而这些请求都是IO密集型的,那么此时node每接受一个请求,在遇到耗时较长的IO操作时,javascript线程并不会一直在此等待,而是交出控制,在回调堆栈里添加IO操作完成后要执行的操作(当回调层级过多,访问数量过大,大量的回调链可能会爆栈)。而在这段时间内,node.js又可以处理其他请求了。所以对于node.js而言,虽然javascript是单线程的,每次只能处理一个请求,但javascript处理一个请求的时间往往较短(对于IO密集型应用而言),只要可以异步处理,那么在处理的过程中,此次请求都会释放控制,使node.js能处理其他请求。这并发请求的同时,IO其实一直处于并发状态,减少处理请求的线程数,节约资源以增加IO的线程数,对于通常耗时很长的IO密集型请求来说,无疑能带来性能上的提升。

前面???锣碌匾恢痹谇康?O密集型,其实是在强调node.js的强项。相应的,它的短板就是CPU密集型的请求。道理很简单,javascript不会并发,只能一个请求完成后才能处理其他请求。一个请求处理的时间越长,其他请求等待的时间越长。同一时间只会有一个请求被处理,并发性能很低。

话说到这儿,我想申明一点:node.js不应该被阻塞;能异步处理的方法异步处理(如使用fs.readFile(),而非fs.syncReadFile()fs.readFileSync()方法)。

node中不能阻塞,并不代表node外不能阻塞。前面我们有讲到fibers,现在,我们就来尝试在fibers中实现阻塞。就以处理一个http请求为例吧:

var Fiber = require('fibers');

var http = require("http");

Fiber(function () {

    var httpFiber = Fiber.current;

    var html = "";

    http.get("http://www.baidu.com", function (res) {

        var dataFiber = Fiber.current;

        res.on("data", function (data) {

            html += data;

        });

        res.on("end", function (data) {

            httpFiber.run();

        });

    });

    Fiber.yield();

    console.log(html);

}).run();

yield()、 run()这两个方法还不了解的同学,请自行查阅《fibers in node》。

fibers的运行并不在node进程中,所以在fibers内部实现阻塞对node整体的性能并没有影响。而且实现起来也是相当容易,只需要在想阻塞的时候,把fiber yield掉。需要继续运行,则执行 run()恢复fiber。在上面的例子中,我们希望当http.get请求发起时阻塞当前程序,当所有数据接收完成时,恢复程序。于是我们在调用http.get后使用 Fiber.yield()中断此fiber。在对response的监听中,如果触发 end事件表明数据传输完成,于是在 end的回调函数中,调用 Fiber.current.run()恢复fiber,这样,后续的代码就以同步的方式拿到http.get请求的数据。

上面的示例只是提供一种思路。如果对这种思路进行一些抽象封装,比如说,对有接受回调函数为参数的异步方法进行一步柯里化,在调用后中断,并劫持回调函数,以恢复程序的代码为回调函数。获取异步数据后,再程序触发预定的回调函数,这样基本能实现异步方法同步化。这段说得比较乱,基本上就是 fibers/future的实现思路,如果有兴趣,请参考其源代码。

NodeJs 相关文章推荐
NodeJS框架Express的模板视图机制分析
Jul 19 NodeJs
抛弃Nginx使用nodejs做反向代理服务器
Jul 17 NodeJs
nodejs中向HTTP响应传送进程的输出
Mar 19 NodeJs
angular2+nodejs实现图片上传功能
Mar 27 NodeJs
NodeJS基础API搭建服务器详细过程记录
Apr 01 NodeJs
Nodejs读取文件时相对路径的正确写法(使用fs模块)
Apr 27 NodeJs
NodeJS实现图片上传代码(Express)
Jun 30 NodeJs
nodejs模块学习之connect解析
Jul 05 NodeJs
nodeJs实现基于连接池连接mysql的方法示例
Feb 10 NodeJs
nodejs(officegen)+vue(axios)在客户端导出word文档的方法
Jul 31 NodeJs
nodejs aes 加解密实例
Oct 10 NodeJs
NodeJS 将文件夹按照存放路径变成一个对应的JSON的方法
Oct 17 NodeJs
nodejs中使用多线程编程的方法实例
Mar 24 #NodeJs
nodejs中实现sleep功能实例
Mar 24 #NodeJs
nodejs中的fiber(纤程)库详解
Mar 24 #NodeJs
nodeJS代码实现计算交社保是否合适
Mar 09 #NodeJs
Nodejs关于gzip/deflate压缩详解
Mar 04 #NodeJs
nodejs URL模块操作URL相关方法介绍
Mar 03 #NodeJs
Windows系统中安装nodejs图文教程
Feb 28 #NodeJs
You might like
php无限极分类递归排序实现方法
2014/11/11 PHP
PHP、Python和Javascript的装饰器模式对比
2015/02/03 PHP
变量在 PHP7 内部的实现(二)
2015/12/21 PHP
PHP提取字符串中的手机号正则表达式怎么写
2017/07/17 PHP
thinkPHP框架乐观锁和悲观锁实例分析
2019/10/30 PHP
jquery 模式对话框终极版实现代码
2009/09/28 Javascript
javascript实现的一个带下拉框功能的文本框
2014/05/08 Javascript
javascript函数式编程实例分析
2015/04/25 Javascript
使用struts2+Ajax+jquery验证用户名是否已被注册
2016/03/22 Javascript
基于jQuery实现仿微博发布框字数提示
2016/07/27 Javascript
jQuery选择器总结之常用元素查找方法
2016/08/04 Javascript
详解JavaScript跨域总结与解决办法
2016/10/31 Javascript
jQuery插件echarts实现的单折线图效果示例【附demo源码下载】
2017/03/04 Javascript
详解redis在nodejs中的应用
2018/05/02 NodeJs
Vue使用Proxy监听所有接口状态的方法实现
2019/06/07 Javascript
JavaScript实现移动端带transition动画的轮播效果
2020/03/24 Javascript
Python脚本实现虾米网签到功能
2016/04/12 Python
Python实现的基数排序算法原理与用法实例分析
2017/11/23 Python
python网络爬虫 Scrapy中selenium用法详解
2019/09/28 Python
python提取xml里面的链接源码详解
2019/10/15 Python
python返回数组的索引实例
2019/11/28 Python
python使用Geany编辑器配置方法
2020/02/21 Python
Python selenium抓取虎牙短视频代码实例
2020/03/02 Python
python2.7使用scapy发送syn实例
2020/05/05 Python
Python 串口通信的实现
2020/09/29 Python
英国鹦鹉店:Parrot Essentials
2018/12/03 全球购物
个人对照检查材料
2014/02/12 职场文书
护理专业毕业生自我鉴定总结
2014/03/24 职场文书
五分钟演讲稿
2014/04/30 职场文书
委托公证书样本
2015/01/23 职场文书
优秀团员自我评价
2015/03/10 职场文书
2015年服务员工作总结
2015/04/08 职场文书
民事辩护词范文
2015/05/21 职场文书
2016年小学六一儿童节活动总结
2016/04/06 职场文书
Ajax常用封装库——Axios的使用
2021/05/08 Javascript
Hive常用日期格式转换语法
2022/06/25 数据库