使用cluster 将自己的Node服务器扩展为多线程服务器


Posted in Javascript onNovember 10, 2014

用nodejs的朋友都有了解,node是单线程的,也就是说跑在8核CPU上,只能使用一个核的算力。
单线程一直是node的一个诟病,但随着0.6版本中引入cluster之后,这个情况则得到了改变,开发人员可以依靠cluster很轻松的将自己的Node服务器扩展为多线程服务器了。

什么是Cluster

cluster是node提供的一个多线程库,用户可以使用它来创建多个线程,线程之间共享一个监听端口,当有外部请求这个端口时,cluster会将请求转发到随机线程里。因为每个node线程都会占用几十兆的内存,所以不能像php那样对每个请求创建一个线程,一般来说创建的线程数最多都不会超过cpu的核心数量。

var cluster = require('cluster');

var http = require('http');

var numCPUs = require('os').cpus().length;
if (cluster.isMaster) {

  // Fork workers.

  for (var i = 0; i < numCPUs; i++) {

    cluster.fork();

  }
  cluster.on('exit', function(worker, code, signal) {

    console.log('worker ' + worker.process.pid + ' died');

  });

} else {

  // Workers can share any TCP connection

  // In this case its a HTTP server

  http.createServer(function(req, res) {

    res.writeHead(200);

    res.end("hello world\n");

  }).listen(8000);

}

如以上代码所示,程序运行时cluster.isMaster会被设置为true,当调用cluster.fork()之后,程序会创建一个线程,并重新运行,这时cluster.isMaster就被设置为false了。我们就主要通过这个变量来判断当前线程是不是子线程的。

还可以注意到,每个子线程被创建之后,都会监听8000端口而不会引起冲突,这就是cluster共享端口的功能了。

线程之间的通信

当线程被创建之后,他们彼此之间是没有共享内存或者数据的。所有的数据交换只能通过worker.send和worker.on('message',handler)在主线程里处理,下面列举一个广播系统的实例。

var cluster = require('cluster');

var http = require('http');

var numCPUs = require('os').cpus().length;
if (cluster.isMaster) {
  var workers=[];

  //新建worker

  function newWorker(){

    var worker=cluster.fork();
    //监听信息,如果type为broadcast的话,则确定为广播

    worker.on('message', function(msg) {

      if(msg.type=='broadcast'){

        var event=msg.event;

        //向所有worker发送此条广播

        workers.forEach(function(worker){

          worker.send(event);

        })

      }

    });

    return worker;

  }
  for (var i = 0; i < numCPUs; i++) {

    workers.push(newWorker());

  }
    cluster.on('online',function(worker){

        console.log('worker %d is online',worker.id);

    })

} else {

  var worker=cluster.worker;
  //广播就是发送一个type为broadcast的信息,event就是广播内容

  worker.broadcast=function(event){

    worker.send({

      type:'broadcast',

      event:event

    });

  }
  //这里用worker.on貌似不能监听到返回的信息

  process.on('message',function(event){

    console.log('worker: '+worker.id+' recived event from '+event.workerId);

  })
  //发送广播

  worker.broadcast({

    message:'online',

    workerId:worker.id

  })

}

需要注意的问题

在上面也提到,线程之间是不能共享数据的,所有的数据交换只能通过线程之间的通信来交换。而且所交换的数据都是可序列化的,所以函数,文件描述符和HttpResponse之类的东西都不能传递。

如果使用cluster,则需要在程序设计的时候考虑到数据交换的问题,我自己的做法就是将类似session的这些数据都存放在redis里,每个线程都做好存取的工作,所有的数据都不放在node内存里。

最后一点,cluster目前还被Node官方标记为Experimental状态,api在将来也许会改变。

Javascript 相关文章推荐
javascript 面向对象思想 附源码
Jul 07 Javascript
一个原生的用户等级的进度条
Jul 03 Javascript
javascript:void(0)使用探讨
Aug 27 Javascript
jquery validate和jquery form 插件组合实现验证表单后AJAX提交
Aug 26 Javascript
jQuery Validate表单验证深入学习
Dec 18 Javascript
JS中用childNodes获取子元素换行会产生一个子元素
Dec 08 Javascript
微信小程序 css使用技巧总结
Jan 09 Javascript
最全的JavaScript开发工具列表 总有一款适合你
Jun 29 Javascript
JavaScript 日期时间选择器一些小结
Apr 02 Javascript
实例详解带参数的 npm script
May 28 Javascript
javascript异步处理与Jquery deferred对象用法总结
Jun 04 jQuery
nginx部署多个vue项目的方法示例
Sep 06 Javascript
前端必备神器 Snap.svg 弹动效果
Nov 10 #Javascript
浅谈JavaScript 框架分类
Nov 10 #Javascript
使用script的src实现跨域和类似ajax效果
Nov 10 #Javascript
jquery插件推荐 jquery.cookie
Nov 09 #Javascript
jquery插件推荐浏览器嗅探userAgent
Nov 09 #Javascript
Javascript限制网页只能在微信内置浏览器中访问
Nov 09 #Javascript
js闭包的用途详解
Nov 09 #Javascript
You might like
PHP框架Swoole定时器Timer特性分析
2014/08/19 PHP
今天你说520了吗?不仅有php表白书还有java表白神器
2016/05/20 PHP
PHP实现的下载远程文件类定义与用法示例
2017/07/05 PHP
JavaScript国旗变换效果代码
2008/08/13 Javascript
jQuery checkbox全选/取消全选实现代码
2009/11/14 Javascript
锋利的jQuery jQuery中的DOM操作
2010/03/21 Javascript
javascript与CSS复习(《精通javascript》)
2010/06/29 Javascript
Javascript中的this绑定介绍
2011/09/22 Javascript
用JavaScript显示浏览器客户端信息的超相近教程
2015/06/18 Javascript
学习Javascript闭包(Closure)知识
2016/08/07 Javascript
详解js实现线段交点的三种算法
2016/08/09 Javascript
JS数组去掉重复数据只保留一条的实现代码
2016/08/11 Javascript
nodejs密码加密中生成随机数的实例代码
2017/07/17 NodeJs
AngularJS ionic手势事件的使用总结
2017/08/09 Javascript
jQuery 导航自动跟随滚动的实现代码
2018/05/30 jQuery
React+Antd+Redux实现待办事件的方法
2019/03/14 Javascript
jQuery Ajax async=&gt;false异步改为同步时,解决导致浏览器假死的问题
2019/07/22 jQuery
layui表格内容溢出的解决方法
2019/09/06 Javascript
JavaScrip如果基于url实现图片下载
2020/07/03 Javascript
Vue 简单实现前端权限控制的示例
2020/12/25 Vue.js
[01:12](回顾)DOTA2国际邀请赛,全世界DOTAer的盛宴
2014/07/01 DOTA
selenium+python 去除启动的黑色cmd窗口方法
2018/05/22 Python
matplotlib subplots 设置总图的标题方法
2018/05/25 Python
Python将8位的图片转为24位的图片实现方法
2018/10/24 Python
使用Python爬虫库requests发送请求、传递URL参数、定制headers
2020/01/25 Python
python时间time模块处理大全
2020/10/25 Python
eBay意大利购物网站:eBay.it
2019/09/04 全球购物
什么是URL
2015/12/13 面试题
大学自我评价
2014/02/12 职场文书
给校长的建议书
2014/03/12 职场文书
团组织推优材料
2014/12/29 职场文书
宾馆前台接待岗位职责
2015/04/02 职场文书
毕业生登记表班级意见
2015/06/05 职场文书
清洁工工作总结
2015/08/11 职场文书
Python面向对象之内置函数相关知识总结
2021/06/24 Python
linux目录管理方法介绍
2022/06/01 Servers