nodejs超出最大的调用栈错误问题


Posted in NodeJs onDecember 27, 2017

今天早上老大和我说之前项目里面的那个数据要改动,要对 mongodb 中每条记录进行 update 操作,你写个脚本跑一下吧。

然后,我默默的回到电脑前,努力工作的一天又开始了。由于此表数据量有点略大,该有一千多万条记录。所以考虑使用 mongodb 的 cursor 游标来进行遍历修改。

程序实现的代码大致如下

function modify(cursor) {
  cursor.hasNext(function(err,bool) {
   if(err) {
      return console.log(err); 
    } 
    if(bool) {
      cursor.next(function(err, item){
       if(err) {
       return console.log(err);
     }
     /* 此处为对数据进行update操作 */
     // 递归调用modify方法 
     return modify(cursor);
   }); 
    }else{
      console.log('finished');
    }
  })
}
var cursor = collection.find();
modify(cursor);

然后让它慢慢跑吧,可是一个令我郁闷的事情发生了。当游标跑到接近500万的时候,程序崩了,提示Uncaught RangeError: Maximum call stack size exceeded

竟然告诉我爆栈了,什么情况? 哎,排查代码,开始填坑。发现我上面递归调用了modify() ,而且递归次数有点小多(1000多万条记录的表啊),可能是函数不断的递归调用导致它的调用栈不断的增加,然后越来越大,最终就没有然后了,爆栈了。看来得给个机会让node进行垃圾回收一下,要想让它有机会垃圾回收那就只得终结一下递归啊。使用系统的setTimeout();来跳出递归调用栈吧。

代码修改如下

function modify(cursor) { 
  cursor.hasNext(function(err,bool) {
    if(err) {
      return console.log(err); 
    }
    if(bool) {      
      cursor.next(function(err, item){
        if(err) {
          return console.log(err);
        }
        /* 此处对数据进行update操作 */
        // 递归调用modify方法 
        return setTimeout(function(){ 
              //跳出递归调用栈
              modify(cursor);
            },0);
      }); 
    }else{
      console.log('finished');
    }
  })
}
var cursor = collection.find();
modify(cursor);

在跑一下试试。。。。ok,好使了。但是运行有点慢啊,因为我每次都让它跳出递归调用栈了。这样虽然没问题但是没必要,因为400多万才会出现爆栈呢。加个计数器吧,等调用栈有点大的时候在跳出来。

var count = 0;
function modify(cursor) { 
  count++;
  cursor.hasNext(function(err,bool) {
    if(err) {
      return console.log(err); 
    }
    if(bool) {
      cursor.next(function(err, item){
        if(err) {
         return console.log(err);
        }
        /* 此处对数据进行update操作 */
        // 递归调用modify方法 
        if(count%10000 === 0) {
          return setTimeout(function(){ 
              //跳出递归调用栈
              modify(cursor);
              },0);
        }else{
          return modify(cursor);
        }    
      }); 
    }else{
      console.log('finished');
    }
  })
}
var cursor = collection.find();
modify(cursor);

总结

以上所述是小编给大家介绍的nodejs超出最大的调用栈错误问题,希望对大家有所帮助,如果大家有任何疑问请给我留言,小编会及时回复大家的。在此也非常感谢大家对三水点靠木网站的支持!

NodeJs 相关文章推荐
nodejs win7下安装方法
May 24 NodeJs
windows系统下简单nodejs安装及环境配置
Jan 08 NodeJs
跟我学Nodejs(二)--- Node.js事件模块
May 21 NodeJs
基于NodeJS的前后端分离的思考与实践(五)多终端适配
Sep 26 NodeJs
轻松创建nodejs服务器(2):nodejs服务器的构成分析
Dec 18 NodeJs
Nodejs进阶:如何将图片转成datauri嵌入到网页中去实例
Nov 21 NodeJs
nodejs实现连接mongodb数据库的方法示例
Mar 15 NodeJs
nodejs中方法和模块用法示例
Dec 24 NodeJs
Nodejs让异步变成同步的方法
Mar 02 NodeJs
nodejs npm错误Error:UNKNOWN:unknown error,mkdir 'D:\Develop\nodejs\node_global'at Error
Mar 02 NodeJs
nodejs对项目下所有空文件夹创建gitkeep的方法
Aug 02 NodeJs
nodejs的安装使用与npm的介绍
Sep 11 NodeJs
nodejs实现简单的gulp打包
Dec 21 #NodeJs
nodejs调取微信收货地址的方法
Dec 20 #NodeJs
基于nodejs实现微信支付功能
Dec 20 #NodeJs
nodeJS微信分享
Dec 20 #NodeJs
NodeJS爬虫实例之糗事百科
Dec 14 #NodeJs
nodejs实现爬取网站图片功能
Dec 14 #NodeJs
NodeJs form-data格式传输文件的方法
Dec 13 #NodeJs
You might like
php学习之 认清变量的作用范围
2010/01/26 PHP
基于PHP输出缓存(output_buffering)的深入理解
2013/06/13 PHP
回帖脱衣服的图片实现代码
2014/02/15 PHP
php中mt_rand()随机数函数用法
2014/11/24 PHP
yii2.0实现验证用户名与邮箱功能
2015/12/22 PHP
php使用ftp远程上传文件类(完美解决主从文件同步问题的方法)
2016/09/23 PHP
Laravel 实现数据软删除功能
2019/08/21 PHP
javascript document.images实例
2008/05/27 Javascript
jquery实现图片放大镜功能
2015/11/23 Javascript
AngularJs 60分钟入门基础教程
2016/04/03 Javascript
JavaScript实战之菜单特效
2016/08/16 Javascript
AngularJS实现ajax请求的方法
2016/11/22 Javascript
零基础轻松学JavaScript闭包
2016/12/30 Javascript
Vue computed计算属性的使用方法
2017/07/14 Javascript
React Native 通告消息竖向轮播组件的封装
2020/08/25 Javascript
JavaScript基础心法 深浅拷贝(浅拷贝和深拷贝)
2018/03/05 Javascript
解决vue-cli创建项目的loader问题
2018/03/13 Javascript
小程序click-scroll组件设计
2019/06/18 Javascript
Element Input输入框的使用方法
2020/07/26 Javascript
在Python中操作列表之list.extend()方法的使用
2015/05/20 Python
Python使用matplotlib实现的图像读取、切割裁剪功能示例
2018/04/28 Python
使用memory_profiler监测python代码运行时内存消耗方法
2018/12/03 Python
Python while循环使用else语句代码实例
2020/02/07 Python
纯CSS和jQuery实现的在页面顶部显示的进度条效果2例(仿手机浏览器进度条效果)
2014/04/16 HTML / CSS
娇韵诗Clarins意大利官方网站:法国天然护肤品牌
2020/03/11 全球购物
夜班门卫岗位职责
2013/12/09 职场文书
留学推荐信怎么写
2014/01/25 职场文书
个人培训自我鉴定
2014/03/28 职场文书
应届毕业生自荐书
2014/06/18 职场文书
处级干部反四风个人对照检查材料思想汇报
2014/09/27 职场文书
清洁工岗位职责
2015/02/13 职场文书
个人学习总结范文
2015/02/15 职场文书
2015年创先争优活动总结
2015/03/27 职场文书
毕业生爱心捐书倡议书
2015/04/27 职场文书
Javascript中async与await的捕捉错误详解
2022/03/03 Javascript
MySQL索引失效十种场景与优化方案
2023/05/08 MySQL