Mongodb 查询执行耗时过长

Question

我正在从事 Go 项目，我正在使用 mongodb 来存储我的数据。但是突然mongodb查询执行花了太多时间来获取数据。 我有一个名为“汽车”的集合，其中包含大约 25000 个文档，每个文档包含大约 200 个字段 (4.385KB)。我有一个这样的聚合查询：

db.cars.aggregate([
    {
        $lookup:
        {
            from: "users",
            localField: "uid",
            foreignField: "_id",
            as: "customer_info"
        }
    },{
        $unwind: "$customer_info"
    },{
        $lookup:
        {
            from: "user_addresses",
            localField: "uid",
            foreignField: "_id",
            as: "address"
        }
    },{
        $unwind: "$address"
    },{
    $lookup:
        {
            from: "models",
            localField: "_id",
            foreignField: "car_id",
            as: "model_info"
        }
    },{
    $match:{
        purchased_on:{$gt:1538392491}, 
        status:{$in:[1,2,3,4]}, 
        "customer_info.status":{$ne:9}, 
        "model_info.status":{$ne:9},
        }
    },{
        $sort:{
            arrival_time:1
        }
    },{
        $skip:0
    },{
        $limit:5
    }
])

我的文档结构是这样的：https://drive.google.com/file/d/1hM-lPwvE45_213rQDYaYuYYbt3LRTgF0/view。

现在，如果在没有索引的情况下运行此查询，则加载数据大约需要 10 分钟。谁能建议我如何减少它的执行时间？

Answer 1

要优化您的查询，需要做很多事情。我会尝试什么：

• 正如 Anthony Winzlet 在 cmets 中所说，尽可能使用 $match 阶段作为第一阶段。这样，您可以减少传递到以下阶段的文档数量，并使用索引。

• 假设您至少使用 3.6 mongo 版本，请使用“let/pipeline”语法 (see here) 更改查找阶段。这样，您可以在查找管道的 $match 阶段集成您的“外部过滤器”（“customer_info.status”：{$ne:9}、“model_info.status”：{$ne:9}）。在正确的字段/集合上使用索引，您将在 $lookup 阶段获得一些时间/内存。

• 尽可能晚地执行您的展开阶段，以限制传递到以下阶段的文档数量。

了解聚合管道的工作原理很重要：每个阶段接收数据、执行其工作并将数据传递到下一个阶段。因此，传递给管道的数据越少，查询速度就越快。