最新文章专题视频专题问答1问答10问答100问答1000问答2000关键字专题1关键字专题50关键字专题500关键字专题1500TAG最新视频文章推荐1 推荐3 推荐5 推荐7 推荐9 推荐11 推荐13 推荐15 推荐17 推荐19 推荐21 推荐23 推荐25 推荐27 推荐29 推荐31 推荐33 推荐35 推荐37视频文章20视频文章30视频文章40视频文章50视频文章60 视频文章70视频文章80视频文章90视频文章100视频文章120视频文章140 视频2关键字专题关键字专题tag2tag3文章专题文章专题2文章索引1文章索引2文章索引3文章索引4文章索引5123456789101112131415文章专题3
当前位置: 首页 - 科技 - 知识百科 - 正文

nodejs超出最大的调用栈错误问题

来源:懂视网 责编:小采 时间:2020-11-27 22:22:39
文档

nodejs超出最大的调用栈错误问题

nodejs超出最大的调用栈错误问题:今天早上老大和我说之前项目里面的那个数据要改动,要对 mongodb 中每条记录进行 update 操作,你写个脚本跑一下吧。 然后,我默默的回到电脑前,努力工作的一天又开始了。由于此表数据量有点略大,该有一千多万条记录。所以考虑使用 mongodb 的 cu
推荐度:
导读nodejs超出最大的调用栈错误问题:今天早上老大和我说之前项目里面的那个数据要改动,要对 mongodb 中每条记录进行 update 操作,你写个脚本跑一下吧。 然后,我默默的回到电脑前,努力工作的一天又开始了。由于此表数据量有点略大,该有一千多万条记录。所以考虑使用 mongodb 的 cu

今天早上老大和我说之前项目里面的那个数据要改动,要对 mongodb 中每条记录进行 update 操作,你写个脚本跑一下吧。

然后,我默默的回到电脑前,努力工作的一天又开始了。由于此表数据量有点略大,该有一千多万条记录。所以考虑使用 mongodb 的 cursor 游标来进行遍历修改。

程序实现的代码大致如下

function modify(cursor) {
 cursor.hasNext(function(err,bool) {
 if(err) {
 return console.log(err); 
 } 
 if(bool) {
 cursor.next(function(err, item){
 if(err) {
 return console.log(err);
 }
 /* 此处为对数据进行update操作 */
 // 递归调用modify方法 
 return modify(cursor);
 }); 
 }else{
 console.log('finished');
 }
 })
}
var cursor = collection.find();
modify(cursor);

然后让它慢慢跑吧,可是一个令我郁闷的事情发生了。当游标跑到接近500万的时候,程序崩了,提示Uncaught RangeError: Maximum call stack size exceeded

竟然告诉我爆栈了,什么情况? 哎,排查代码,开始填坑。发现我上面递归调用了modify() ,而且递归次数有点小多(1000多万条记录的表啊),可能是函数不断的递归调用导致它的调用栈不断的增加,然后越来越大,最终就没有然后了,爆栈了。看来得给个机会让node进行垃圾回收一下,要想让它有机会垃圾回收那就只得终结一下递归啊。使用系统的setTimeout();来跳出递归调用栈吧。

代码修改如下

function modify(cursor) { 
 cursor.hasNext(function(err,bool) {
 if(err) {
 return console.log(err); 
 }
 if(bool) { 
 cursor.next(function(err, item){
 if(err) {
 return console.log(err);
 }
 /* 此处对数据进行update操作 */
 // 递归调用modify方法 
 return setTimeout(function(){ 
 //跳出递归调用栈
 modify(cursor);
 },0);
 }); 
 }else{
 console.log('finished');
 }
 })
}
var cursor = collection.find();
modify(cursor);

在跑一下试试。。ok,好使了。但是运行有点慢啊,因为我每次都让它跳出递归调用栈了。这样虽然没问题但是没必要,因为400多万才会出现爆栈呢。加个计数器吧,等调用栈有点大的时候在跳出来。

var count = 0;
function modify(cursor) { 
 count++;
 cursor.hasNext(function(err,bool) {
 if(err) {
 return console.log(err); 
 }
 if(bool) {
 cursor.next(function(err, item){
 if(err) {
 return console.log(err);
 }
 /* 此处对数据进行update操作 */
 // 递归调用modify方法 
 if(count%10000 === 0) {
 return setTimeout(function(){ 
 //跳出递归调用栈
 modify(cursor);
 },0);
 }else{
 return modify(cursor);
 } 
 }); 
 }else{
 console.log('finished');
 }
 })
}
var cursor = collection.find();
modify(cursor);

总结

以上所述是小编给大家介绍的nodejs超出最大的调用栈错误问题,希望对大家有所帮助,如果大家有任何疑问请给我留言,小编会及时回复大家的。在此也非常感谢大家对脚本之家网站的支持!

文档

nodejs超出最大的调用栈错误问题

nodejs超出最大的调用栈错误问题:今天早上老大和我说之前项目里面的那个数据要改动,要对 mongodb 中每条记录进行 update 操作,你写个脚本跑一下吧。 然后,我默默的回到电脑前,努力工作的一天又开始了。由于此表数据量有点略大,该有一千多万条记录。所以考虑使用 mongodb 的 cu
推荐度:
标签: js 的错误 Nodejs
  • 热门焦点

最新推荐

猜你喜欢

热门推荐

专题
Top