【问题标题】:Best way to process results of multiple, sequential, dependent mongo queries in NodeJS在 NodeJS 中处理多个、顺序、依赖的 mongo 查询结果的最佳方法
【发布时间】:2016-07-19 08:55:44
【问题描述】:

高级

我是 JS 和 Node.js 的新手。我正在开发一个应该返回状态值的 API 端点。要计算状态值,我需要进行两个连续的 mongo 查询,其中第二组查询依赖于第一个查询。第二组查询将为我在第一个查询中找到的每个值提供一个状态,我将根据一些逻辑从中选择一个。在 NodeJS 中最好的方法是什么?

细节

这是我第一次尝试的部分内容。

function getItemStatus(key, value, callback) {
        MongoClient.connect(mongo_url, function(err, db) {
            if (err) { return console.dir(err); }
            db.collection('status', function(err, coll) {
                if (err) { return console.dir(err); }
                coll.distinct("_id.metric", function(err, metrics) {
                    if (err) { return console.dir(err); }
                    console.log('metrics : ', metrics);
                    _.foreach(metrics, function(metric) {
                        var query = {"_id": {
                            "$gte" : {key: key, value: value, created: new Date("1800-01-01T00:00:00"), metric : metric},
                            "$lte" : {key: key, value: value, created: new Date("2100-01-01T00:00:00"), metric : metric}}};
                        coll.find(query, {sort: {"_id.created": -1}, limit: 1})

我建立连接,使用不同的查询查询一组指标值。然后,对于每个指标,我想询问最新状态。理想情况下,我希望拥有整个状态集,这样我就可以编写一个函数来获取这个状态集并决定将返回哪个状态。我的问题是将状态传递回“链上”,以便我可以处理状态集。

在同步情况下,我会简单地写这样的东西

val metrics = getDistinctMetrics(key, value)
val statuses = metrics.map(getStatusForMetric)
val status = filterStatuses(statuses)

如何在 JavaScript/NodeJS 中完成此操作?

UPDATED 强调第一个查询将在第二步中触发 几个 个查询,即第一个查询找到的每个结果都有一个。

【问题讨论】:

标签: javascript node.js mongodb


【解决方案1】:

据我了解,您希望并行或以瀑布模式执行查询并对最终结果执行一些逻辑。您应该查看一个允许并行/瀑布执行的库。像这样

瀑布:Waterfall

    async.waterfall([
    function(callback) {
        callback(null, 'one', 'two');
    },
    function(arg1, arg2, callback) {
        // arg1 now equals 'one' and arg2 now equals 'two'
        callback(null, 'three');
    },
    function(arg1, callback) {
        // arg1 now equals 'three'
        callback(null, 'done');
    }
], function (err, result) {
    // result now equals 'done'
});

并行:Parallel

async.parallel({
    collectionOne: function (callback) {
        collectionOne.find(query, function (err, result) {
            if (err) {
                return handleError(res, err);
            }
            callback(null, result);
        })
    },
    collectionTwo: function (callback) {
        collectionTwo.find(query, function (err, result) {
            if (err) {
                return handleError(res, err);
            }
            callback(null, result);
        })
    },
    collectionThree: function (callback) {
        collectionThree.find(query, function (err, result) {
            if (err) {
                return handleError(res, err);
            }
            callback(null, result);
        })
    },
    collectionFour: function (callback) {
        collectionFour.find(query, function (err, result) {
            if (err) {
                return handleError(res, err);
            }
            callback(null, result);
        })
    },
}, function (err, results) {
    return res.status(200).json(results);
});

在最后的回调中你可以做一些逻辑或返回响应。

【讨论】:

  • 感谢@twboc,瀑布模型看起来很有希望。但是,我仍然不明白如何获取所有结果状态。基本上我想为第一个函数的 each 结果调用一个函数(即,对于找到的每个指标,我想检索状态,然后处理状态集)。这对于一般的链接来说似乎很好,但真正让我着迷的是分支。
  • Parallel 方法在这里没有用,因为在他的例子中所有三个函数都是同步的。基本上@langkilde 您需要在完成第一个函数并使用第一个函数的结果后调用另一个函数,因此将结果作为参数发送或将它们分配给两者均可访问的变量。 (请记住安全性,因为这不是一个好习惯 - 全局变量之一)。 Promises 是一个概念,可以使用回调或显式使用其他模块来实现,例如有很多。祝你好运。
  • 在这种情况下,当您获得一组雕像时,使用“$or”语句构建查询,并且您在循环中所做的所有事情都将在一个查询中检索,然后您可以迭代在结果数组上并将其与正确的数据匹配。 docs.mongodb.com/manual/reference/operator/query/or 将 or 循环中的查询放入 { $or : [{query}, {query}....]} 中,然后对其进行迭代。
【解决方案2】:

在您的示例代码中,您在另一个网络调用中进行网络调用,这可能会导致 回调地狱,从而导致查询行为不端,为了克服这一点,您可以使用 @987654321 @。

这将帮助您避免回调地狱以及您的查询也将得到解决。

示例代码:-

new Promise (function(resolve, reject){
      return db.collection.find(function).exec()
      .then(function(result_of_first_query){
            return db.collection.findOne(function).exec()   //in this yopu can user the result of first query
      }).then(function(result_of_second_query){
             resolve(result_of_second_query);
      })
})

您可以使用每个 .then 添加更多查询

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 2013-03-08
    • 1970-01-01
    • 2018-05-19
    • 2020-07-24
    • 2010-09-21
    • 2015-05-12
    • 2011-08-14
    • 2013-08-25
    相关资源
    最近更新 更多