使用cluster 将自己的Node服务器扩展为多线程服务器


Posted in Javascript onNovember 10, 2014

用nodejs的朋友都有了解,node是单线程的,也就是说跑在8核CPU上,只能使用一个核的算力。
单线程一直是node的一个诟病,但随着0.6版本中引入cluster之后,这个情况则得到了改变,开发人员可以依靠cluster很轻松的将自己的Node服务器扩展为多线程服务器了。

什么是Cluster

cluster是node提供的一个多线程库,用户可以使用它来创建多个线程,线程之间共享一个监听端口,当有外部请求这个端口时,cluster会将请求转发到随机线程里。因为每个node线程都会占用几十兆的内存,所以不能像php那样对每个请求创建一个线程,一般来说创建的线程数最多都不会超过cpu的核心数量。

var cluster = require('cluster');

var http = require('http');

var numCPUs = require('os').cpus().length;
if (cluster.isMaster) {

  // Fork workers.

  for (var i = 0; i < numCPUs; i++) {

    cluster.fork();

  }
  cluster.on('exit', function(worker, code, signal) {

    console.log('worker ' + worker.process.pid + ' died');

  });

} else {

  // Workers can share any TCP connection

  // In this case its a HTTP server

  http.createServer(function(req, res) {

    res.writeHead(200);

    res.end("hello world\n");

  }).listen(8000);

}

如以上代码所示,程序运行时cluster.isMaster会被设置为true,当调用cluster.fork()之后,程序会创建一个线程,并重新运行,这时cluster.isMaster就被设置为false了。我们就主要通过这个变量来判断当前线程是不是子线程的。

还可以注意到,每个子线程被创建之后,都会监听8000端口而不会引起冲突,这就是cluster共享端口的功能了。

线程之间的通信

当线程被创建之后,他们彼此之间是没有共享内存或者数据的。所有的数据交换只能通过worker.send和worker.on('message',handler)在主线程里处理,下面列举一个广播系统的实例。

var cluster = require('cluster');

var http = require('http');

var numCPUs = require('os').cpus().length;
if (cluster.isMaster) {
  var workers=[];

  //新建worker

  function newWorker(){

    var worker=cluster.fork();
    //监听信息,如果type为broadcast的话,则确定为广播

    worker.on('message', function(msg) {

      if(msg.type=='broadcast'){

        var event=msg.event;

        //向所有worker发送此条广播

        workers.forEach(function(worker){

          worker.send(event);

        })

      }

    });

    return worker;

  }
  for (var i = 0; i < numCPUs; i++) {

    workers.push(newWorker());

  }
    cluster.on('online',function(worker){

        console.log('worker %d is online',worker.id);

    })

} else {

  var worker=cluster.worker;
  //广播就是发送一个type为broadcast的信息,event就是广播内容

  worker.broadcast=function(event){

    worker.send({

      type:'broadcast',

      event:event

    });

  }
  //这里用worker.on貌似不能监听到返回的信息

  process.on('message',function(event){

    console.log('worker: '+worker.id+' recived event from '+event.workerId);

  })
  //发送广播

  worker.broadcast({

    message:'online',

    workerId:worker.id

  })

}

需要注意的问题

在上面也提到,线程之间是不能共享数据的,所有的数据交换只能通过线程之间的通信来交换。而且所交换的数据都是可序列化的,所以函数,文件描述符和HttpResponse之类的东西都不能传递。

如果使用cluster,则需要在程序设计的时候考虑到数据交换的问题,我自己的做法就是将类似session的这些数据都存放在redis里,每个线程都做好存取的工作,所有的数据都不放在node内存里。

最后一点,cluster目前还被Node官方标记为Experimental状态,api在将来也许会改变。

Javascript 相关文章推荐
event对象的方法 兼容多浏览器
Jun 27 Javascript
JS 操作Array数组的方法及属性实例解析
Jan 08 Javascript
js中iframe调用父页面的方法
Oct 30 Javascript
javascript数据类型示例分享
Jan 19 Javascript
javascript使用Promise对象实现异步编程
Mar 01 Javascript
jQuery animate和CSS3相结合实现缓动追逐效果附源码下载
Apr 18 Javascript
浅谈JavaScript for循环 闭包
Jun 22 Javascript
js实现常用排序算法
Aug 09 Javascript
IOS中safari下的select下拉菜单文字过长不换行的解决方法
Sep 26 Javascript
JS基于贪心算法解决背包问题示例
Nov 27 Javascript
解决 viewer.js 动态更新图片导致无法预览的问题
May 14 Javascript
JointJS JavaScript流程图绘制框架解析
Aug 15 Javascript
前端必备神器 Snap.svg 弹动效果
Nov 10 #Javascript
浅谈JavaScript 框架分类
Nov 10 #Javascript
使用script的src实现跨域和类似ajax效果
Nov 10 #Javascript
jquery插件推荐 jquery.cookie
Nov 09 #Javascript
jquery插件推荐浏览器嗅探userAgent
Nov 09 #Javascript
Javascript限制网页只能在微信内置浏览器中访问
Nov 09 #Javascript
js闭包的用途详解
Nov 09 #Javascript
You might like
用PHP编程开发“虚拟域名”系统
2006/10/09 PHP
解析PHP SPL标准库的用法(遍历目录,查找固定条件的文件)
2013/06/18 PHP
基于PHP实现等比压缩图片大小
2016/03/04 PHP
Yii2.0中使用js异步删除示例
2017/03/10 PHP
浅谈laravel 5.6 安装 windows上使用composer的安装过程
2019/10/18 PHP
JavaScript 事件冒泡简介及应用
2010/01/11 Javascript
小议Javascript中的this指针
2010/03/18 Javascript
jquery 跨域访问问题解决方法(笔记)
2011/06/08 Javascript
最简单的js图片切换效果实现代码
2011/09/24 Javascript
jQuery实现的感应鼠标悬停图片色彩渐显效果
2015/03/03 Javascript
js实现带圆角的两级导航菜单效果代码
2015/08/24 Javascript
jQuery实现的多滑动门,多选项卡效果代码
2016/03/28 Javascript
jQuery通用的全局遍历方法$.each()用法实例
2016/07/04 Javascript
微信小程序 http请求详细介绍
2016/10/09 Javascript
Bootstrap源码解读标签、徽章、缩略图和警示框(8)
2016/12/26 Javascript
@ResponseBody 和 @RequestBody 注解的区别
2017/03/08 Javascript
详解Vue 开发模式下跨域问题
2017/06/06 Javascript
JavaScript前端页面搜索功能案例【基于jQuery】
2019/07/10 jQuery
javascript头像上传代码实例
2019/09/28 Javascript
微信小程序动态添加和删除组件的现实
2020/02/28 Javascript
如何实现echarts markline标签名显示自己想要的
2020/07/20 Javascript
编写简单的Python程序来判断文本的语种
2015/04/07 Python
Python字符串拼接的几种方法整理
2017/08/02 Python
Python基于高斯消元法计算线性方程组示例
2018/01/17 Python
python 求某条线上特定x值或y值的点坐标方法
2019/07/09 Python
python+OpenCV实现图像拼接
2020/03/05 Python
HTML5中input[type='date']自定义样式与日历校验功能的实现代码
2017/07/11 HTML / CSS
介绍一下.NET构架下remoting和webservice
2014/05/08 面试题
矿泉水广告词
2014/03/20 职场文书
企业安全生产责任书
2014/04/14 职场文书
驾驶员安全责任书
2014/07/22 职场文书
飞机制造技术专业求职信
2014/07/27 职场文书
创建绿色学校先进个人材料
2014/08/20 职场文书
推普周活动总结
2014/08/28 职场文书
世界红十字日活动总结
2015/02/10 职场文书
2016最新离婚协议书范本及程序
2016/03/18 职场文书