使用cluster 将自己的Node服务器扩展为多线程服务器


Posted in Javascript onNovember 10, 2014

用nodejs的朋友都有了解,node是单线程的,也就是说跑在8核CPU上,只能使用一个核的算力。
单线程一直是node的一个诟病,但随着0.6版本中引入cluster之后,这个情况则得到了改变,开发人员可以依靠cluster很轻松的将自己的Node服务器扩展为多线程服务器了。

什么是Cluster

cluster是node提供的一个多线程库,用户可以使用它来创建多个线程,线程之间共享一个监听端口,当有外部请求这个端口时,cluster会将请求转发到随机线程里。因为每个node线程都会占用几十兆的内存,所以不能像php那样对每个请求创建一个线程,一般来说创建的线程数最多都不会超过cpu的核心数量。

var cluster = require('cluster');

var http = require('http');

var numCPUs = require('os').cpus().length;
if (cluster.isMaster) {

  // Fork workers.

  for (var i = 0; i < numCPUs; i++) {

    cluster.fork();

  }
  cluster.on('exit', function(worker, code, signal) {

    console.log('worker ' + worker.process.pid + ' died');

  });

} else {

  // Workers can share any TCP connection

  // In this case its a HTTP server

  http.createServer(function(req, res) {

    res.writeHead(200);

    res.end("hello world\n");

  }).listen(8000);

}

如以上代码所示,程序运行时cluster.isMaster会被设置为true,当调用cluster.fork()之后,程序会创建一个线程,并重新运行,这时cluster.isMaster就被设置为false了。我们就主要通过这个变量来判断当前线程是不是子线程的。

还可以注意到,每个子线程被创建之后,都会监听8000端口而不会引起冲突,这就是cluster共享端口的功能了。

线程之间的通信

当线程被创建之后,他们彼此之间是没有共享内存或者数据的。所有的数据交换只能通过worker.send和worker.on('message',handler)在主线程里处理,下面列举一个广播系统的实例。

var cluster = require('cluster');

var http = require('http');

var numCPUs = require('os').cpus().length;
if (cluster.isMaster) {
  var workers=[];

  //新建worker

  function newWorker(){

    var worker=cluster.fork();
    //监听信息,如果type为broadcast的话,则确定为广播

    worker.on('message', function(msg) {

      if(msg.type=='broadcast'){

        var event=msg.event;

        //向所有worker发送此条广播

        workers.forEach(function(worker){

          worker.send(event);

        })

      }

    });

    return worker;

  }
  for (var i = 0; i < numCPUs; i++) {

    workers.push(newWorker());

  }
    cluster.on('online',function(worker){

        console.log('worker %d is online',worker.id);

    })

} else {

  var worker=cluster.worker;
  //广播就是发送一个type为broadcast的信息,event就是广播内容

  worker.broadcast=function(event){

    worker.send({

      type:'broadcast',

      event:event

    });

  }
  //这里用worker.on貌似不能监听到返回的信息

  process.on('message',function(event){

    console.log('worker: '+worker.id+' recived event from '+event.workerId);

  })
  //发送广播

  worker.broadcast({

    message:'online',

    workerId:worker.id

  })

}

需要注意的问题

在上面也提到,线程之间是不能共享数据的,所有的数据交换只能通过线程之间的通信来交换。而且所交换的数据都是可序列化的,所以函数,文件描述符和HttpResponse之类的东西都不能传递。

如果使用cluster,则需要在程序设计的时候考虑到数据交换的问题,我自己的做法就是将类似session的这些数据都存放在redis里,每个线程都做好存取的工作,所有的数据都不放在node内存里。

最后一点,cluster目前还被Node官方标记为Experimental状态,api在将来也许会改变。

Javascript 相关文章推荐
JavaScript的面向对象(一)
Nov 09 Javascript
jquery实现的可隐藏重现的靠边悬浮层实例代码
May 27 Javascript
js点击更换背景颜色或图片的实例代码
Jun 25 Javascript
jQuery 重复加载错误以及修复方法
Dec 16 Javascript
jQuery插件之jQuery.Form.js用法实例分析(附demo示例源码)
Jan 04 Javascript
jQuery animate和CSS3相结合实现缓动追逐效果附源码下载
Apr 18 Javascript
微信小程序发布新版本时自动提示用户更新的方法
Jun 07 Javascript
JavaScript基础之this和箭头函数详析
Sep 05 Javascript
浅谈Vue组件单元测试究竟测试什么
Feb 05 Javascript
浅析JavaScript 函数防抖和节流
Jul 13 Javascript
vue 实现一个简单的全局调用弹窗案例
Sep 10 Javascript
原生js实现点击按钮复制内容到剪切板
Nov 19 Javascript
前端必备神器 Snap.svg 弹动效果
Nov 10 #Javascript
浅谈JavaScript 框架分类
Nov 10 #Javascript
使用script的src实现跨域和类似ajax效果
Nov 10 #Javascript
jquery插件推荐 jquery.cookie
Nov 09 #Javascript
jquery插件推荐浏览器嗅探userAgent
Nov 09 #Javascript
Javascript限制网页只能在微信内置浏览器中访问
Nov 09 #Javascript
js闭包的用途详解
Nov 09 #Javascript
You might like
50个PHP程序性能优化的方法
2014/06/02 PHP
Yii视图操作之自定义分页实现方法
2016/07/14 PHP
PHP时间日期增减操作示例【date strtotime实现加一天、加一月等操作】
2018/12/21 PHP
PHP PDOStatement::nextRowset讲解
2019/02/01 PHP
“不能执行已释放的Script代码”错误的原因及解决办法
2007/09/09 Javascript
AJAX 网页保留浏览器前进后退等功能
2011/02/12 Javascript
JQuery获取浏览器窗口内容部分高度的代码
2012/02/24 Javascript
Highcharts 非常实用的Javascript统计图demo示例
2013/07/03 Javascript
jQuery实现用户注册的表单验证示例
2013/08/28 Javascript
node.js中axios使用心得总结
2017/11/29 Javascript
如何去除vue项目中的#及其ie9兼容性
2018/01/11 Javascript
实例解析Vue.js下载方式及基本概念
2018/05/11 Javascript
iconfont的三种使用方式详解
2018/08/05 Javascript
vue仿element实现分页器效果
2018/09/13 Javascript
vue图片上传本地预览组件使用详解
2019/02/20 Javascript
[06:40]2014DOTA2西雅图国际邀请赛 DK战队巡礼
2014/07/07 DOTA
python调用windows api锁定计算机示例
2014/04/17 Python
python 中的list和array的不同之处及转换问题
2018/03/13 Python
Python爬虫使用脚本登录Github并查看信息
2018/07/16 Python
Python操作Excel插入删除行的方法
2018/12/10 Python
Python 脚本的三种执行方式小结
2019/12/21 Python
Python实现bilibili时间长度查询的示例代码
2020/01/14 Python
Pycharm连接远程服务器过程图解
2020/04/30 Python
Python 调用C++封装的进一步探索交流
2021/03/04 Python
使用HTML5和CSS3制作一个模态框的示例
2018/03/07 HTML / CSS
Java如何格式化日期
2012/08/07 面试题
高职助产应届生自荐信
2013/09/24 职场文书
家长会学生家长演讲稿
2013/12/29 职场文书
便利店投资创业计划书
2014/02/08 职场文书
三年级班级文化建设方案
2014/05/04 职场文书
大学计划书范文800字
2014/08/14 职场文书
2014年加油站工作总结
2014/12/04 职场文书
2015年大学生村官工作总结
2015/04/21 职场文书
暖春观后感
2015/06/08 职场文书
2016大一新生军训感言
2015/12/08 职场文书
Python中相见恨晚的技巧
2021/04/13 Python