使用cluster 将自己的Node服务器扩展为多线程服务器


Posted in Javascript onNovember 10, 2014

用nodejs的朋友都有了解,node是单线程的,也就是说跑在8核CPU上,只能使用一个核的算力。
单线程一直是node的一个诟病,但随着0.6版本中引入cluster之后,这个情况则得到了改变,开发人员可以依靠cluster很轻松的将自己的Node服务器扩展为多线程服务器了。

什么是Cluster

cluster是node提供的一个多线程库,用户可以使用它来创建多个线程,线程之间共享一个监听端口,当有外部请求这个端口时,cluster会将请求转发到随机线程里。因为每个node线程都会占用几十兆的内存,所以不能像php那样对每个请求创建一个线程,一般来说创建的线程数最多都不会超过cpu的核心数量。

var cluster = require('cluster');

var http = require('http');

var numCPUs = require('os').cpus().length;
if (cluster.isMaster) {

  // Fork workers.

  for (var i = 0; i < numCPUs; i++) {

    cluster.fork();

  }
  cluster.on('exit', function(worker, code, signal) {

    console.log('worker ' + worker.process.pid + ' died');

  });

} else {

  // Workers can share any TCP connection

  // In this case its a HTTP server

  http.createServer(function(req, res) {

    res.writeHead(200);

    res.end("hello world\n");

  }).listen(8000);

}

如以上代码所示,程序运行时cluster.isMaster会被设置为true,当调用cluster.fork()之后,程序会创建一个线程,并重新运行,这时cluster.isMaster就被设置为false了。我们就主要通过这个变量来判断当前线程是不是子线程的。

还可以注意到,每个子线程被创建之后,都会监听8000端口而不会引起冲突,这就是cluster共享端口的功能了。

线程之间的通信

当线程被创建之后,他们彼此之间是没有共享内存或者数据的。所有的数据交换只能通过worker.send和worker.on('message',handler)在主线程里处理,下面列举一个广播系统的实例。

var cluster = require('cluster');

var http = require('http');

var numCPUs = require('os').cpus().length;
if (cluster.isMaster) {
  var workers=[];

  //新建worker

  function newWorker(){

    var worker=cluster.fork();
    //监听信息,如果type为broadcast的话,则确定为广播

    worker.on('message', function(msg) {

      if(msg.type=='broadcast'){

        var event=msg.event;

        //向所有worker发送此条广播

        workers.forEach(function(worker){

          worker.send(event);

        })

      }

    });

    return worker;

  }
  for (var i = 0; i < numCPUs; i++) {

    workers.push(newWorker());

  }
    cluster.on('online',function(worker){

        console.log('worker %d is online',worker.id);

    })

} else {

  var worker=cluster.worker;
  //广播就是发送一个type为broadcast的信息,event就是广播内容

  worker.broadcast=function(event){

    worker.send({

      type:'broadcast',

      event:event

    });

  }
  //这里用worker.on貌似不能监听到返回的信息

  process.on('message',function(event){

    console.log('worker: '+worker.id+' recived event from '+event.workerId);

  })
  //发送广播

  worker.broadcast({

    message:'online',

    workerId:worker.id

  })

}

需要注意的问题

在上面也提到,线程之间是不能共享数据的,所有的数据交换只能通过线程之间的通信来交换。而且所交换的数据都是可序列化的,所以函数,文件描述符和HttpResponse之类的东西都不能传递。

如果使用cluster,则需要在程序设计的时候考虑到数据交换的问题,我自己的做法就是将类似session的这些数据都存放在redis里,每个线程都做好存取的工作,所有的数据都不放在node内存里。

最后一点,cluster目前还被Node官方标记为Experimental状态,api在将来也许会改变。

Javascript 相关文章推荐
JQuery动态给table添加、删除行 改进版
Jan 19 Javascript
判断文档离浏览器顶部的距离的方法
Jan 08 Javascript
Javascript函数的参数
Jul 16 Javascript
全面解析JavaScript中的valueOf与toString方法(推荐)
Jun 14 Javascript
JS实现兼容各种浏览器的高级拖动方法完整实例【测试可用】
Jun 21 Javascript
jquery注册文本框获取焦点清空,失去焦点赋值的简单实例
Sep 08 Javascript
JS禁止查看网页源代码的实现方法
Oct 12 Javascript
浅谈关于axios和session的一些事
Jul 13 Javascript
p5.js实现斐波那契螺旋的示例代码
Mar 22 Javascript
Vue中实现权限控制的方法示例
Jun 07 Javascript
JS中的算法与数据结构之二叉查找树(Binary Sort Tree)实例详解
Aug 16 Javascript
vue登录以及权限验证相关的实现
Oct 25 Javascript
前端必备神器 Snap.svg 弹动效果
Nov 10 #Javascript
浅谈JavaScript 框架分类
Nov 10 #Javascript
使用script的src实现跨域和类似ajax效果
Nov 10 #Javascript
jquery插件推荐 jquery.cookie
Nov 09 #Javascript
jquery插件推荐浏览器嗅探userAgent
Nov 09 #Javascript
Javascript限制网页只能在微信内置浏览器中访问
Nov 09 #Javascript
js闭包的用途详解
Nov 09 #Javascript
You might like
PHP set_time_limit(0)长连接的实现分析
2010/03/02 PHP
使用NetBeans + Xdebug调试PHP程序的方法
2011/04/12 PHP
PHP中static关键字原理的学习研究分析
2011/07/18 PHP
MySQL的FIND_IN_SET函数使用方法分享
2012/03/27 PHP
PHP中关键字interface和implements详解
2017/06/14 PHP
javascript 特殊字符串
2009/02/25 Javascript
javascript 表单规则集合对象
2009/07/21 Javascript
基于jQuery的消息提示插件 DivAlert之旅(二)
2010/04/01 Javascript
Asp.net下使用Jquery Ajax传送和接收DataTable的代码
2010/09/12 Javascript
jquery $.getJSON()跨域请求
2011/12/21 Javascript
js保留小数点后几位的写法
2014/01/03 Javascript
JavaScript实现弹出模态窗体并接受传值的方法
2016/02/12 Javascript
javascript淘宝主图放大镜功能
2016/10/20 Javascript
JavaScript实现同一个页面打开多张图片
2016/12/29 Javascript
jQuery中clone()函数实现表单中增加和减少输入项
2017/05/13 jQuery
jQuery实现弹窗下底部页面禁止滑动效果
2017/12/19 jQuery
红黑树的插入详解及Javascript实现方法示例
2018/03/26 Javascript
js 计算图片内点个数的示例代码
2019/04/04 Javascript
JS正则表达式验证密码强度
2020/03/18 Javascript
基于原生js实现九宫格算法代码实例
2020/07/03 Javascript
JS变量提升及函数提升实例解析
2020/09/03 Javascript
vue中实现点击空白区域关闭弹窗的两种方法
2020/12/30 Vue.js
[05:05]给小松五分钟系列 第二期介绍为什么打DOTA2
2014/07/02 DOTA
在IIS服务器上以CGI方式运行Python脚本的教程
2015/04/25 Python
快速了解python leveldb
2018/01/18 Python
Ranorex通过Python将报告发送到邮箱的方法
2020/01/12 Python
HTML5 常见面试题之PC端和移动端区别介绍
2018/01/22 HTML / CSS
加拿大女装网上购物:Reitmans
2016/10/20 全球购物
英国泰坦旅游网站:全球陪同游览,邮轮和铁路旅行
2016/11/29 全球购物
医院门卫岗位职责
2013/12/30 职场文书
科研先进个人典型材料
2014/01/31 职场文书
有兼职工作经历的简历自我评价
2014/03/07 职场文书
毕业生面试求职信
2014/06/23 职场文书
4s店销售经理岗位职责
2014/07/19 职场文书
2014年度党员自我评议
2014/09/13 职场文书
实习计划书范文
2015/01/16 职场文书