JavaScript泄漏内存(Node.js / Restify / MongoDB)

更新4：通过在函数外部实例化restify客户端(请参阅controllers / messages.js)并在每次请求后调用global.gc(),内存增长速度似乎已经降低了很多(每10秒约500KB).然而,内存使用量仍在不断增长.

Update3：看过这篇文章：https://journal.paul.querna.org/articles/2011/04/05/openssl-memory-use/

值得注意的是,我正在使用HTTPS和Restify.

更新2：将以下代码更新为当前状态.我试过用Express换掉Restify.可悲的是,这并没有任何区别.似乎链的末尾的api调用(restify – > mongodb – >外部api)导致一切都保留在内存中.

更新1：我用标准的MongoDB驱动程序替换了Mongoose.内存使用似乎增长速度较慢,但泄漏仍然存在.

我一直在努力尝试找到这个泄漏几天了.

我正在使用Restify和Mongoose运行API,并且对于每个API调用,我至少进行一次MongoDB查找.我有大约1-2k用户在一天内多次点击API.

我试过的

>我已经将我的代码隔离到只使用Restify并使用ApacheBench来发出大量请求(100k).测试期间内存使用率保持在60MB左右.
>我已经将我的代码隔离到只使用Restify和Mongoose并以与上面相同的方式测试它.内存使用率保持在80MB左右.
>我已经使用ApacheBench在本地测试了完整的生产代码.内存使用率保持在80MB左右.
>我已经按时间间隔自动转储了堆.我最大的堆转储是400MB.我只能看到有大量的字符串和数组,但我无法清楚地看到它的模式.

那么,可能出现什么问题？

我只使用一个API用户完成了上述测试.这意味着Mongoose只能一遍又一遍地抓取同一个文档.与生产的不同之处在于许多不同的用户都在使用API,这意味着mongoose会获得大量不同的文档.

当我启动nodejs服务器时,内存会迅速增长到100MB-200MB.它最终稳定在500MB左右.这是否意味着它会为每个用户泄漏内存？每个用户访问过API后都会稳定下来吗？

我在下面列出了我的代码,其中概述了我的API的一般结构.我很想知道我的代码或任何其他方法是否存在严重错误,以找出导致高内存使用的原因.

码

app.js

var restify = require('restify');
var MongoClient = require('mongodb').MongoClient;

// ... setup restify server and mongodb

require('./api/message')(server,db);

API / message.js

module.exports = function(server,db) {

    // Controllers used for retrieving accounts via MongoDB and communication with an external api
    var accountController = require('../controllers/accounts')(db);        
    var messageController = require('../controllers/messages')();

    // Restify bind to put
    server.put('/api/message',function(req,res,next) {
        // Token from body
        var token = req.body.token;

        // Get account by token
        accountController.getAccount(token,function(error,account) {

            // Send a message using external API
            messageController.sendMessage(token,account.email,function() {
                res.send(201,{});
                return next();
            });
        });
    });
};

控制器/ accounts.js

module.exports = function(db) {

    // Gets account by a token
    function getAccount(token,callback) {
        var ObjectID = require('mongodb').ObjectID;

        var collection = db.collection('accounts');

        collection.findOne({
            token: token
        },account) {

            if (error) {
                return callback(error);
            }

            if (account) {
                return callback('',account);
            }

            return callback('Account not found');
        });
    }
};

控制器/ messages.js

module.exports = function() {

    function sendMessage(token,email,callback) {

        // Get a token used for external API
        getAccesstoken(function() {}

            // ... Setup client

            // Do POST
            client.post('/external_api',values,function(err,req,obj) {
                return callback();
            });

        });
    }

    return {
        sendMessage: sendMessage
    };
};

怀疑泄漏的快照

解决方法

可能是getter中的一个bug,我在使用mongoose schema https://github.com/LearnBoost/mongoose/issues/1565的虚拟或getter时得到了它

JavaScript泄漏内存(Node.js / Restify / MongoDB)

解决方法

相关文章