mongodb - 如何在不超过最大文档大小的情况下编写聚合？

Question

我通过查询得到了超过最大文档大小问题异常，如下所示，

pipe = [
    {"$match": { "birthday":{"$gte":datetime.datetime(1987, 1, 1, 0, 0)} }}
    ]
res =db.patients.aggregate(pipe,allowDiskUse=True)

我通过添加 $project 运算符修复了它，

但是，如果即使我使用 $project 文档仍然超过 16MB 怎么办？

我能做什么？任何想法 ？谢谢

pipe = [
    {"$project": {"birthday":1, "id":1}
    },
    {"$match": { "birthday":{"$gte":datetime.datetime(1987, 1, 1, 0, 0)} }
     }
    ]
res =db.patients.aggregate(pipe,allowDiskUse=True)

异常

OperationFailure: command SON([('aggregate', 'patients'), ('pipeline', [{'$match': {'birthday': {'$gte': datetime.datetime(1987, 1, 1, 0, 0)}}}]), ('allowDiskUse', True)]) on namespace tw_insurance_security_development.$cmd failed: exception: aggregation result exceeds maximum document size (16MB)

Answer 1

默认情况下，聚合结果会在单个 BSON 文档中返回给您，这就是大小限制的来源。如果您需要返回更多，您可以:

• 将结果输出到集合中。您可以通过完成管道来完成此操作

  {"$out": "某些集合名称"}

  然后您可以像平常一样查询该集合(完成后您需要自行删除它)

• 通过在调用聚合时指定 useCursor=True 将结果作为游标返回。

这两个选项都需要 mongodb 2.6:如果您仍在运行 mongodb 2.4，那么这只是聚合的基本限制。