使用cluster 将自己的Node服务器扩展为多线程服务器


Posted in Javascript onNovember 10, 2014

用nodejs的朋友都有了解,node是单线程的,也就是说跑在8核CPU上,只能使用一个核的算力。
单线程一直是node的一个诟病,但随着0.6版本中引入cluster之后,这个情况则得到了改变,开发人员可以依靠cluster很轻松的将自己的Node服务器扩展为多线程服务器了。

什么是Cluster

cluster是node提供的一个多线程库,用户可以使用它来创建多个线程,线程之间共享一个监听端口,当有外部请求这个端口时,cluster会将请求转发到随机线程里。因为每个node线程都会占用几十兆的内存,所以不能像php那样对每个请求创建一个线程,一般来说创建的线程数最多都不会超过cpu的核心数量。

var cluster = require('cluster');

var http = require('http');

var numCPUs = require('os').cpus().length;
if (cluster.isMaster) {

  // Fork workers.

  for (var i = 0; i < numCPUs; i++) {

    cluster.fork();

  }
  cluster.on('exit', function(worker, code, signal) {

    console.log('worker ' + worker.process.pid + ' died');

  });

} else {

  // Workers can share any TCP connection

  // In this case its a HTTP server

  http.createServer(function(req, res) {

    res.writeHead(200);

    res.end("hello world\n");

  }).listen(8000);

}

如以上代码所示,程序运行时cluster.isMaster会被设置为true,当调用cluster.fork()之后,程序会创建一个线程,并重新运行,这时cluster.isMaster就被设置为false了。我们就主要通过这个变量来判断当前线程是不是子线程的。

还可以注意到,每个子线程被创建之后,都会监听8000端口而不会引起冲突,这就是cluster共享端口的功能了。

线程之间的通信

当线程被创建之后,他们彼此之间是没有共享内存或者数据的。所有的数据交换只能通过worker.send和worker.on('message',handler)在主线程里处理,下面列举一个广播系统的实例。

var cluster = require('cluster');

var http = require('http');

var numCPUs = require('os').cpus().length;
if (cluster.isMaster) {
  var workers=[];

  //新建worker

  function newWorker(){

    var worker=cluster.fork();
    //监听信息,如果type为broadcast的话,则确定为广播

    worker.on('message', function(msg) {

      if(msg.type=='broadcast'){

        var event=msg.event;

        //向所有worker发送此条广播

        workers.forEach(function(worker){

          worker.send(event);

        })

      }

    });

    return worker;

  }
  for (var i = 0; i < numCPUs; i++) {

    workers.push(newWorker());

  }
    cluster.on('online',function(worker){

        console.log('worker %d is online',worker.id);

    })

} else {

  var worker=cluster.worker;
  //广播就是发送一个type为broadcast的信息,event就是广播内容

  worker.broadcast=function(event){

    worker.send({

      type:'broadcast',

      event:event

    });

  }
  //这里用worker.on貌似不能监听到返回的信息

  process.on('message',function(event){

    console.log('worker: '+worker.id+' recived event from '+event.workerId);

  })
  //发送广播

  worker.broadcast({

    message:'online',

    workerId:worker.id

  })

}

需要注意的问题

在上面也提到,线程之间是不能共享数据的,所有的数据交换只能通过线程之间的通信来交换。而且所交换的数据都是可序列化的,所以函数,文件描述符和HttpResponse之类的东西都不能传递。

如果使用cluster,则需要在程序设计的时候考虑到数据交换的问题,我自己的做法就是将类似session的这些数据都存放在redis里,每个线程都做好存取的工作,所有的数据都不放在node内存里。

最后一点,cluster目前还被Node官方标记为Experimental状态,api在将来也许会改变。

Javascript 相关文章推荐
用JS判断IE版本的代码 超管用!
Aug 09 Javascript
自动设置iframe大小的jQuery代码
Sep 11 Javascript
js 实现菜单上下显示附效果图
Nov 21 Javascript
confirm的用法示例用于按钮操作时确定是否执行
Jun 19 Javascript
Vue.js第一天学习笔记(数据的双向绑定、常用指令)
Dec 01 Javascript
three.js快速入门【推荐】
Jan 21 Javascript
JS基于贪心算法解决背包问题示例
Nov 27 Javascript
Angular简单验证功能示例
Dec 22 Javascript
vue2.0父子组件间传递数据的方法
Aug 16 Javascript
vue.js多页面开发环境搭建过程
Apr 24 Javascript
layui 图片上传+表单提交+ Spring MVC的实例
Sep 21 Javascript
原生js实现滑块区间组件
Jan 20 Javascript
前端必备神器 Snap.svg 弹动效果
Nov 10 #Javascript
浅谈JavaScript 框架分类
Nov 10 #Javascript
使用script的src实现跨域和类似ajax效果
Nov 10 #Javascript
jquery插件推荐 jquery.cookie
Nov 09 #Javascript
jquery插件推荐浏览器嗅探userAgent
Nov 09 #Javascript
Javascript限制网页只能在微信内置浏览器中访问
Nov 09 #Javascript
js闭包的用途详解
Nov 09 #Javascript
You might like
解析php类的注册与自动加载
2013/07/05 PHP
调试WordPress中定时任务的相关PHP脚本示例
2015/12/10 PHP
PHP中的浅复制与深复制的实例详解
2017/10/26 PHP
php 广告点击统计代码(php+mysql)
2018/02/21 PHP
分享8个Laravel模型时间戳使用技巧小结
2020/02/12 PHP
javascript Xml增删改查(IE下)操作实现代码
2009/01/30 Javascript
JSQL SQLProxy 的 php 版本代码
2010/05/05 Javascript
JQuery EasyUI 对话框的使用方法
2010/10/24 Javascript
VBS通过WMI监视注册表变动的代码
2011/10/27 Javascript
基于jQuery.Validate验证库知识点的详解
2013/04/26 Javascript
javascript 弹出的窗口返回值给父窗口具体实现
2013/11/23 Javascript
Javascript 计算字符串在localStorage中所占字节数
2015/10/21 Javascript
使用jQuery UI库开发Web界面的简单入门指引
2016/04/22 Javascript
AngularJS基础 ng-model 指令详解及示例代码
2016/08/02 Javascript
浅谈js中对象的使用
2016/08/11 Javascript
Bootstrap树形菜单插件TreeView.js使用方法详解
2016/11/01 Javascript
JavaScript实现前端实时搜索功能
2020/03/26 Javascript
iframe高度自适应及隐藏滚动条的实例详解
2017/09/29 Javascript
vue脚手架中配置Sass的方法
2018/01/04 Javascript
python 图片验证码代码分享
2012/07/04 Python
浅谈python中的占位符
2017/11/09 Python
python打印文件的前几行或最后几行教程
2020/02/13 Python
django-crontab实现服务端的定时任务的示例代码
2020/02/17 Python
Django解决frame拒绝问题的方法
2020/12/18 Python
Python3+SQLAlchemy+Sqlite3实现ORM教程
2021/02/16 Python
CSS3 :not()选择器实现最后一行li去除某种css样式
2016/10/19 HTML / CSS
linux面试题参考答案(1)
2016/01/22 面试题
法律专业应届本科毕业生求职信
2013/10/25 职场文书
学校门卫管理制度
2014/01/30 职场文书
中学生运动会入场词
2014/02/12 职场文书
竞选副班长演讲稿
2014/04/24 职场文书
协商一致解除劳动合同协议书
2014/09/14 职场文书
世界气象日活动总结
2015/02/27 职场文书
2015年数学教师工作总结
2015/05/20 职场文书
采购部2015年度工作总结
2015/07/24 职场文书
《走遍天下书为侣》教学反思
2016/02/22 职场文书