使用cluster 将自己的Node服务器扩展为多线程服务器


Posted in Javascript onNovember 10, 2014

用nodejs的朋友都有了解,node是单线程的,也就是说跑在8核CPU上,只能使用一个核的算力。
单线程一直是node的一个诟病,但随着0.6版本中引入cluster之后,这个情况则得到了改变,开发人员可以依靠cluster很轻松的将自己的Node服务器扩展为多线程服务器了。

什么是Cluster

cluster是node提供的一个多线程库,用户可以使用它来创建多个线程,线程之间共享一个监听端口,当有外部请求这个端口时,cluster会将请求转发到随机线程里。因为每个node线程都会占用几十兆的内存,所以不能像php那样对每个请求创建一个线程,一般来说创建的线程数最多都不会超过cpu的核心数量。

var cluster = require('cluster');

var http = require('http');

var numCPUs = require('os').cpus().length;
if (cluster.isMaster) {

  // Fork workers.

  for (var i = 0; i < numCPUs; i++) {

    cluster.fork();

  }
  cluster.on('exit', function(worker, code, signal) {

    console.log('worker ' + worker.process.pid + ' died');

  });

} else {

  // Workers can share any TCP connection

  // In this case its a HTTP server

  http.createServer(function(req, res) {

    res.writeHead(200);

    res.end("hello world\n");

  }).listen(8000);

}

如以上代码所示,程序运行时cluster.isMaster会被设置为true,当调用cluster.fork()之后,程序会创建一个线程,并重新运行,这时cluster.isMaster就被设置为false了。我们就主要通过这个变量来判断当前线程是不是子线程的。

还可以注意到,每个子线程被创建之后,都会监听8000端口而不会引起冲突,这就是cluster共享端口的功能了。

线程之间的通信

当线程被创建之后,他们彼此之间是没有共享内存或者数据的。所有的数据交换只能通过worker.send和worker.on('message',handler)在主线程里处理,下面列举一个广播系统的实例。

var cluster = require('cluster');

var http = require('http');

var numCPUs = require('os').cpus().length;
if (cluster.isMaster) {
  var workers=[];

  //新建worker

  function newWorker(){

    var worker=cluster.fork();
    //监听信息,如果type为broadcast的话,则确定为广播

    worker.on('message', function(msg) {

      if(msg.type=='broadcast'){

        var event=msg.event;

        //向所有worker发送此条广播

        workers.forEach(function(worker){

          worker.send(event);

        })

      }

    });

    return worker;

  }
  for (var i = 0; i < numCPUs; i++) {

    workers.push(newWorker());

  }
    cluster.on('online',function(worker){

        console.log('worker %d is online',worker.id);

    })

} else {

  var worker=cluster.worker;
  //广播就是发送一个type为broadcast的信息,event就是广播内容

  worker.broadcast=function(event){

    worker.send({

      type:'broadcast',

      event:event

    });

  }
  //这里用worker.on貌似不能监听到返回的信息

  process.on('message',function(event){

    console.log('worker: '+worker.id+' recived event from '+event.workerId);

  })
  //发送广播

  worker.broadcast({

    message:'online',

    workerId:worker.id

  })

}

需要注意的问题

在上面也提到,线程之间是不能共享数据的,所有的数据交换只能通过线程之间的通信来交换。而且所交换的数据都是可序列化的,所以函数,文件描述符和HttpResponse之类的东西都不能传递。

如果使用cluster,则需要在程序设计的时候考虑到数据交换的问题,我自己的做法就是将类似session的这些数据都存放在redis里,每个线程都做好存取的工作,所有的数据都不放在node内存里。

最后一点,cluster目前还被Node官方标记为Experimental状态,api在将来也许会改变。

Javascript 相关文章推荐
jquery 简短右键菜单 多浏览器兼容
Jan 01 Javascript
jQuery操作select的实例代码
Jun 14 Javascript
jquery之超简单的div显示和隐藏特效demo(分享)
Jul 09 Javascript
Jquery easyUI 更新行示例
Mar 06 Javascript
教你如何使用PHP输出中文JSON字符串
May 22 Javascript
解决jquery中动态新增的元素节点无法触发事件问题的两种方法
Oct 30 Javascript
使用jQuery的load方法设计动态加载及解决被加载页面js失效问题
Mar 01 Javascript
vue的Virtual Dom实现snabbdom解密
May 03 Javascript
js自定义弹框插件的封装
Aug 24 Javascript
基于node搭建服务器,写接口,调接口,跨域的实例
May 13 Javascript
vue.js引入外部CSS样式和外部JS文件的方法
Jan 06 Javascript
微信小程序语音同步智能识别的实现案例代码解析
May 29 Javascript
前端必备神器 Snap.svg 弹动效果
Nov 10 #Javascript
浅谈JavaScript 框架分类
Nov 10 #Javascript
使用script的src实现跨域和类似ajax效果
Nov 10 #Javascript
jquery插件推荐 jquery.cookie
Nov 09 #Javascript
jquery插件推荐浏览器嗅探userAgent
Nov 09 #Javascript
Javascript限制网页只能在微信内置浏览器中访问
Nov 09 #Javascript
js闭包的用途详解
Nov 09 #Javascript
You might like
火影忍者:这才是千手柱间和扉间的真正死因,角都就比较搞笑了!
2020/03/10 日漫
php隐藏实际地址的文件下载方法
2015/04/18 PHP
smarty高级特性之对象的使用方法
2015/12/25 PHP
PHP编程获取音频文件时长的方法【基于getid3类】
2017/04/20 PHP
谷歌浏览器 insertCell与appendChild的区别
2009/02/12 Javascript
jquery 屏蔽一个区域内的所有元素,禁止输入
2009/10/22 Javascript
jQuery之排序组件的深入解析
2013/06/19 Javascript
js复制网页内容并兼容各主流浏览器的代码
2013/12/17 Javascript
javascript实现拖放效果
2015/12/16 Javascript
浅析Bootstrap组件之面板组件
2016/05/04 Javascript
js实现获取两个日期之间所有日期的方法
2016/06/17 Javascript
详谈JS中实现种子随机数及作用
2016/07/19 Javascript
jQuery如何跳转到另一个网页 就这么简单
2016/12/28 Javascript
微信小程序 picker 组件详解及简单实例
2017/01/10 Javascript
ThinkPHP+jquery实现“加载更多”功能代码
2017/03/11 Javascript
React进阶学习之组件的解耦之道
2017/08/07 Javascript
Angular4绑定html内容出现警告的处理方法
2017/11/03 Javascript
详解vue开发中调用微信jssdk的问题
2019/04/16 Javascript
jQuery实现图片随机切换、抽奖功能(实例代码)
2019/10/23 jQuery
js DOM的事件常见操作实例详解
2019/12/16 Javascript
JS实现小星星特效
2019/12/24 Javascript
python对数组进行反转的方法
2015/05/20 Python
Python实现打印螺旋矩阵功能的方法
2017/11/21 Python
对Python 窗体(tkinter)树状数据(Treeview)详解
2018/10/11 Python
PyCharm设置注释字体颜色以及是否倾斜的操作
2020/09/16 Python
浅析css3中matrix函数的使用
2016/06/06 HTML / CSS
深入剖析webstorage[html5的本地数据处理]
2016/07/11 HTML / CSS
英国电视和家用电器购物网站:rlrdistribution.co.uk
2018/11/20 全球购物
公司面试感谢信
2014/02/01 职场文书
化学教学随笔感言
2014/02/19 职场文书
2014年单位植树节活动方案
2014/03/23 职场文书
民主评议党员登记表自我评价
2014/10/20 职场文书
运动会闭幕式主持词
2015/07/01 职场文书
2016银行招聘自荐信
2016/01/28 职场文书
nginx对http请求处理的各个阶段详析
2021/03/31 Servers
python tqdm用法及实例详解
2021/06/16 Python