使用cluster 将自己的Node服务器扩展为多线程服务器


Posted in Javascript onNovember 10, 2014

用nodejs的朋友都有了解,node是单线程的,也就是说跑在8核CPU上,只能使用一个核的算力。
单线程一直是node的一个诟病,但随着0.6版本中引入cluster之后,这个情况则得到了改变,开发人员可以依靠cluster很轻松的将自己的Node服务器扩展为多线程服务器了。

什么是Cluster

cluster是node提供的一个多线程库,用户可以使用它来创建多个线程,线程之间共享一个监听端口,当有外部请求这个端口时,cluster会将请求转发到随机线程里。因为每个node线程都会占用几十兆的内存,所以不能像php那样对每个请求创建一个线程,一般来说创建的线程数最多都不会超过cpu的核心数量。

var cluster = require('cluster');

var http = require('http');

var numCPUs = require('os').cpus().length;
if (cluster.isMaster) {

  // Fork workers.

  for (var i = 0; i < numCPUs; i++) {

    cluster.fork();

  }
  cluster.on('exit', function(worker, code, signal) {

    console.log('worker ' + worker.process.pid + ' died');

  });

} else {

  // Workers can share any TCP connection

  // In this case its a HTTP server

  http.createServer(function(req, res) {

    res.writeHead(200);

    res.end("hello world\n");

  }).listen(8000);

}

如以上代码所示,程序运行时cluster.isMaster会被设置为true,当调用cluster.fork()之后,程序会创建一个线程,并重新运行,这时cluster.isMaster就被设置为false了。我们就主要通过这个变量来判断当前线程是不是子线程的。

还可以注意到,每个子线程被创建之后,都会监听8000端口而不会引起冲突,这就是cluster共享端口的功能了。

线程之间的通信

当线程被创建之后,他们彼此之间是没有共享内存或者数据的。所有的数据交换只能通过worker.send和worker.on('message',handler)在主线程里处理,下面列举一个广播系统的实例。

var cluster = require('cluster');

var http = require('http');

var numCPUs = require('os').cpus().length;
if (cluster.isMaster) {
  var workers=[];

  //新建worker

  function newWorker(){

    var worker=cluster.fork();
    //监听信息,如果type为broadcast的话,则确定为广播

    worker.on('message', function(msg) {

      if(msg.type=='broadcast'){

        var event=msg.event;

        //向所有worker发送此条广播

        workers.forEach(function(worker){

          worker.send(event);

        })

      }

    });

    return worker;

  }
  for (var i = 0; i < numCPUs; i++) {

    workers.push(newWorker());

  }
    cluster.on('online',function(worker){

        console.log('worker %d is online',worker.id);

    })

} else {

  var worker=cluster.worker;
  //广播就是发送一个type为broadcast的信息,event就是广播内容

  worker.broadcast=function(event){

    worker.send({

      type:'broadcast',

      event:event

    });

  }
  //这里用worker.on貌似不能监听到返回的信息

  process.on('message',function(event){

    console.log('worker: '+worker.id+' recived event from '+event.workerId);

  })
  //发送广播

  worker.broadcast({

    message:'online',

    workerId:worker.id

  })

}

需要注意的问题

在上面也提到,线程之间是不能共享数据的,所有的数据交换只能通过线程之间的通信来交换。而且所交换的数据都是可序列化的,所以函数,文件描述符和HttpResponse之类的东西都不能传递。

如果使用cluster,则需要在程序设计的时候考虑到数据交换的问题,我自己的做法就是将类似session的这些数据都存放在redis里,每个线程都做好存取的工作,所有的数据都不放在node内存里。

最后一点,cluster目前还被Node官方标记为Experimental状态,api在将来也许会改变。

Javascript 相关文章推荐
了解jQuery技巧来提高你的代码
Jan 08 Javascript
父元素与子iframe相互获取变量和元素对象的具体实现
Oct 15 Javascript
原生javascript实现拖动元素示例代码
Sep 01 Javascript
javascript实现通过表格绘制颜色填充矩形的方法
Apr 21 Javascript
Bootstrap每天必学之基础排版
Nov 20 Javascript
详解支持Angular 2的表格控件
Jan 19 Javascript
Vue中如何实现轮播图的示例代码
Jul 27 Javascript
Node.js中你不可不精的Stream(流)
Jun 08 Javascript
详解Vue中使用Echarts的两种方式
Jul 03 Javascript
Vue Promise的axios请求封装详解
Aug 13 Javascript
vue iview多张图片大图预览、缩放翻转
Jul 13 Javascript
jQuery鼠标滑过横向时间轴样式(代码详解)
Nov 01 jQuery
前端必备神器 Snap.svg 弹动效果
Nov 10 #Javascript
浅谈JavaScript 框架分类
Nov 10 #Javascript
使用script的src实现跨域和类似ajax效果
Nov 10 #Javascript
jquery插件推荐 jquery.cookie
Nov 09 #Javascript
jquery插件推荐浏览器嗅探userAgent
Nov 09 #Javascript
Javascript限制网页只能在微信内置浏览器中访问
Nov 09 #Javascript
js闭包的用途详解
Nov 09 #Javascript
You might like
php常用的安全过滤函数集锦
2014/10/09 PHP
Laravel 5框架学习之Eloquent 关系
2015/04/09 PHP
thinkPHP基于ajax实现的菜单与分页示例
2016/07/12 PHP
PHP crc32()函数讲解
2019/02/14 PHP
csdn 论坛技术区平均给分功能
2009/11/07 Javascript
javascript简单实现表格行间隔显示颜色并高亮显示
2013/11/29 Javascript
jquery如何判断表格同一列不同行input数据是否重复
2014/05/14 Javascript
JavaScript中判断变量是数组、函数或是对象类型的方法
2015/02/25 Javascript
JS实现两表格里数据来回转移的方法
2015/05/28 Javascript
JavaScript操作表单实例讲解(上)
2016/06/20 Javascript
Ubuntu 16.04 64位中搭建Node.js开发环境教程
2016/10/19 Javascript
JavaScript判断浏览器及其版本信息
2017/01/20 Javascript
JS简单实现动态添加HTML标记的方法示例
2018/04/08 Javascript
vue+axios新手实践实现登陆的示例代码
2018/06/06 Javascript
详解jenkins自动化部署vue
2019/05/14 Javascript
vue中使用百度脑图kityminder-core二次开发的实现
2019/09/26 Javascript
js+canvas实现简单扫雷小游戏
2021/01/22 Javascript
javascript 函数的暂停和恢复实例详解
2020/04/25 Javascript
Python实现通过文件路径获取文件hash值的方法
2017/04/29 Python
Python使用struct处理二进制的实例详解
2017/09/11 Python
Python语言描述机器学习之Logistic回归算法
2017/12/21 Python
Python中static相关知识小结
2018/01/02 Python
python+pyqt5实现KFC点餐收银系统
2019/01/24 Python
Django网络框架之创建虚拟开发环境操作示例
2019/06/06 Python
python中 * 的用法详解
2019/07/10 Python
python实现大文本文件分割
2019/07/22 Python
解决python使用list()时总是报错的问题
2020/05/05 Python
HTML5新增元素如何兼容旧浏览器有哪些方法
2014/05/09 HTML / CSS
缓刑人员思想汇报
2014/10/11 职场文书
党员群众路线教育实践活动学习笔记
2014/11/05 职场文书
2014年团支书工作总结
2014/11/14 职场文书
2015年大班保育员工作总结
2015/05/18 职场文书
出生证明范本
2015/06/15 职场文书
2015年国庆节新闻稿
2015/07/18 职场文书
多人股份制合作协议书
2016/03/19 职场文书
Win11绿屏怎么办?Win11绿屏死机的解决方法
2021/11/21 数码科技