使用cluster 将自己的Node服务器扩展为多线程服务器


Posted in Javascript onNovember 10, 2014

用nodejs的朋友都有了解,node是单线程的,也就是说跑在8核CPU上,只能使用一个核的算力。
单线程一直是node的一个诟病,但随着0.6版本中引入cluster之后,这个情况则得到了改变,开发人员可以依靠cluster很轻松的将自己的Node服务器扩展为多线程服务器了。

什么是Cluster

cluster是node提供的一个多线程库,用户可以使用它来创建多个线程,线程之间共享一个监听端口,当有外部请求这个端口时,cluster会将请求转发到随机线程里。因为每个node线程都会占用几十兆的内存,所以不能像php那样对每个请求创建一个线程,一般来说创建的线程数最多都不会超过cpu的核心数量。

var cluster = require('cluster');

var http = require('http');

var numCPUs = require('os').cpus().length;
if (cluster.isMaster) {

  // Fork workers.

  for (var i = 0; i < numCPUs; i++) {

    cluster.fork();

  }
  cluster.on('exit', function(worker, code, signal) {

    console.log('worker ' + worker.process.pid + ' died');

  });

} else {

  // Workers can share any TCP connection

  // In this case its a HTTP server

  http.createServer(function(req, res) {

    res.writeHead(200);

    res.end("hello world\n");

  }).listen(8000);

}

如以上代码所示,程序运行时cluster.isMaster会被设置为true,当调用cluster.fork()之后,程序会创建一个线程,并重新运行,这时cluster.isMaster就被设置为false了。我们就主要通过这个变量来判断当前线程是不是子线程的。

还可以注意到,每个子线程被创建之后,都会监听8000端口而不会引起冲突,这就是cluster共享端口的功能了。

线程之间的通信

当线程被创建之后,他们彼此之间是没有共享内存或者数据的。所有的数据交换只能通过worker.send和worker.on('message',handler)在主线程里处理,下面列举一个广播系统的实例。

var cluster = require('cluster');

var http = require('http');

var numCPUs = require('os').cpus().length;
if (cluster.isMaster) {
  var workers=[];

  //新建worker

  function newWorker(){

    var worker=cluster.fork();
    //监听信息,如果type为broadcast的话,则确定为广播

    worker.on('message', function(msg) {

      if(msg.type=='broadcast'){

        var event=msg.event;

        //向所有worker发送此条广播

        workers.forEach(function(worker){

          worker.send(event);

        })

      }

    });

    return worker;

  }
  for (var i = 0; i < numCPUs; i++) {

    workers.push(newWorker());

  }
    cluster.on('online',function(worker){

        console.log('worker %d is online',worker.id);

    })

} else {

  var worker=cluster.worker;
  //广播就是发送一个type为broadcast的信息,event就是广播内容

  worker.broadcast=function(event){

    worker.send({

      type:'broadcast',

      event:event

    });

  }
  //这里用worker.on貌似不能监听到返回的信息

  process.on('message',function(event){

    console.log('worker: '+worker.id+' recived event from '+event.workerId);

  })
  //发送广播

  worker.broadcast({

    message:'online',

    workerId:worker.id

  })

}

需要注意的问题

在上面也提到,线程之间是不能共享数据的,所有的数据交换只能通过线程之间的通信来交换。而且所交换的数据都是可序列化的,所以函数,文件描述符和HttpResponse之类的东西都不能传递。

如果使用cluster,则需要在程序设计的时候考虑到数据交换的问题,我自己的做法就是将类似session的这些数据都存放在redis里,每个线程都做好存取的工作,所有的数据都不放在node内存里。

最后一点,cluster目前还被Node官方标记为Experimental状态,api在将来也许会改变。

Javascript 相关文章推荐
JQuery通过Ajax提交表单并返回结果
Jul 31 Javascript
JavaScript中document对象使用详解
Jan 06 Javascript
使用JavaScript实现连续滚动字幕效果的方法
Jul 07 Javascript
jQuery基础知识点总结(DOM操作)
Jun 01 Javascript
vuex实现简易计数器
Oct 27 Javascript
JavaScript数组操作详解
Feb 04 Javascript
如何快速上手Vuex
Feb 14 Javascript
jQuery图片缩放插件smartZoom使用实例详解
Aug 25 jQuery
JS原型继承四步曲及原型继承图一览
Nov 28 Javascript
利用babel将es6语法转es5的简单示例
Dec 01 Javascript
vue页面更新patch的实现示例
Mar 25 Javascript
vue实现打地鼠小游戏
Aug 21 Javascript
前端必备神器 Snap.svg 弹动效果
Nov 10 #Javascript
浅谈JavaScript 框架分类
Nov 10 #Javascript
使用script的src实现跨域和类似ajax效果
Nov 10 #Javascript
jquery插件推荐 jquery.cookie
Nov 09 #Javascript
jquery插件推荐浏览器嗅探userAgent
Nov 09 #Javascript
Javascript限制网页只能在微信内置浏览器中访问
Nov 09 #Javascript
js闭包的用途详解
Nov 09 #Javascript
You might like
PHP中调用JAVA
2006/10/09 PHP
通过curl模拟post和get方式提交的表单类
2014/04/23 PHP
curl 出现错误的调试方法(必看)
2017/02/13 PHP
使用jQuery重置(reset)表单的方法
2014/05/05 Javascript
jQuery实现类似老虎机滚动抽奖效果
2015/08/06 Javascript
以jQuery中$.Deferred对象为例讲解promise对象是如何处理异步问题
2015/11/13 Javascript
jQuery实现简单的网页换肤效果示例
2016/09/18 Javascript
gulp解决跨域的配置文件问题
2017/06/08 Javascript
微信小程序 五星评分的实现实例
2017/08/04 Javascript
vue.js整合vux中的上拉加载下拉刷新实例教程
2018/01/09 Javascript
js实现点击展开隐藏效果(实例代码)
2018/09/28 Javascript
JavaScript创建防篡改对象的方法分析
2018/12/30 Javascript
vue-for循环嵌套操作示例
2019/01/28 Javascript
详解vue.js移动端配置flexible.js及注意事项
2019/04/10 Javascript
基于Express框架使用POST传递Form数据
2019/08/10 Javascript
TypeScript 引用资源文件后提示找不到的异常处理技巧
2020/07/15 Javascript
Element Alert警告的具体使用方法
2020/07/27 Javascript
javascript贪吃蛇游戏设计与实现
2020/09/17 Javascript
[01:09:01]完美世界DOTA2联赛循环赛 Magma vs PXG BO2第一场 10.28
2020/10/28 DOTA
对django xadmin自定义菜单的实例详解
2019/01/03 Python
python钉钉机器人运维脚本监控实例
2019/02/20 Python
Python实现求两个数组交集的方法示例
2019/02/23 Python
python科学计算之scipy——optimize用法
2019/11/25 Python
Python实现汇率转换操作
2020/05/03 Python
Python爬虫回测股票的实例讲解
2021/01/22 Python
TensorFlow低版本代码自动升级为1.0版本
2021/02/20 Python
会计电算一体化个人简历的自我评价
2013/10/15 职场文书
大学学习生活感言
2014/01/18 职场文书
2014年社区学雷锋活动总结
2014/03/09 职场文书
先进个人申报材料
2014/12/30 职场文书
北京故宫的导游词
2015/01/31 职场文书
个人年终总结开头
2015/03/06 职场文书
opencv读取视频并保存图像的方法
2021/06/04 Python
Flask使用SQLAlchemy实现持久化数据
2021/07/16 Python
「魔法少女伊莉雅」美游粘土人开订
2022/03/21 日漫