javascript - 查询嵌套对象键

标签 javascript mongodb sails.js aggregation-framework waterline

我想做的是让我的结果列出历史包含特定日期的位置。

下面是我在 mongo 中的一个文档的示例。 下面的历史对象将日期存储为键,将“数字”存储为键。

我需要做的是执行一个查询,该查询将返回历史键(日期)在特定范围内的所有文档。

例如,如果开始日期为1505435121000,结束日期为1505860712000,则将返回以下文档。如果开始日期为1451606400,结束日期为148​​1906300,则不会返回以下文档

{
    "sold": 24,
    "index": "5",
    "searchRange": 1,
    "history": {
        "1505860712000": 103079,
        "1505773195000": 157659,
        "1505694076000": 92157,
        "1505609622000": 47861,
        "1505516353000": 78869,
        "1505435121000": 158278,
        "1505343796000": 229944
    },
    "createdAt": {
        "$date": "2017-09-20T17:18:49.665Z"
    },
    "updatedAt": {
        "$date": "2017-10-20T08:02:47.094Z"
    },
}

我现在正在做的是拉取所有文档,然后过滤它们。然而,随着 10k+ 文档的增长,这将花费非常长的时间并且变得非常 CPU 密集且效率低下

最佳答案

MongoDB 并没有真正很好地处理遍历对象键,因此最好将数据以“数组”形式处理,这样处理起来更自然

如果您有 MongoDB 3.4.4 或更高版本,那么您可以申请 $objectToArray在启用条件的转换中:

Model.native((err,collection) => {

  collection.aggregate([
    { "$redact": {
      "$cond": {
        "if": {
          "$gt": [
            { "$size": {
              "$filter": {
                "input": { "$objectToArray": "$history" },
                "as": "h",
                "cond": {
                  "$and": [
                    { "$gte": [ "$$h.k", startDate.toString() ] },
                    { "$lte": [ "$$h.k", endDate.toString() ] }
                  ]
                }
              }
            }},
            0
          ]
        },
        "then": "$$KEEP",
        "else": "$$PRUNE"
      }
    }}
  ])
  .toArray((err,results) => {
    // do something with results
  })
})

简而言之$objectToArray将“对象”转换为“数组”(以防命名不明确),它具有 “k” 的“key”和 “v” 属性对于每个对象条目的“值”。这个“数组”然后被提供给 $filter它应用条件来查看每个条目是否符合提供的标准。如果是,则将其返回;如果不是,则将其从返回的数组中删除。

最终 $size数组的 告诉你是否有元素满足条件,这个逻辑条件用 $cond 表示。根据 $redact 中的结果确定是 $$KEEP 文档还是 $$PRUNE 文档管道。

如果您没有可用的版本和运算符,则需要使用 $where 的 JavaScript 评估来处理查询。 :

Model.native((err,collection) => {

  collection.find({ "$where": function() {
    var startDate =  1505435121000,
        endDate = 1505860712000;

    return Object.keys(this.history).some( k =>
      k >= startDate.toString() && k <= endDate.toString()
    )
  }})
  .toArray((err,results) => {
    // do something with results
  })
})

请注意,您需要在上下文中提供函数内的变量,因为这是将表达式发送到服务器的方式。所以你可能想要做的是创建一个函数,它将这些作为参数并返回一个实际上可以馈送到 $where 的函数。从句作为参数。

您甚至可能会发现传输到服务器的方式实际上是一个“字符串”,这是一个更简单的概念,因此如果您愿意,您实际上可以将整个 JavaScript 表达式构造为一个字符串。只要它在服务器上评估没有错误就没问题。

它仍然具有与Object.keys 相同的概念从对象和 Array.some() 中提取“键”如果这些“键”中的“任何”落在这些条件的范围内,则返回 true。


改变数据

如前所述,MongoDB 本身不能很好地处理对象键。因此,通常最好在数组中显示此类数据:

'history': [
  { "time": 150586071200, "value": 103079 },
  { "time": 1505773195000, "value": 157659 }
]

如果您确实拥有它,那么您的查询实际上非常简单。只是在这个阶段编写“本地”mongodb 部分:

var startDate =  1505435121000,
        endDate = 1505860712000;

collection.find({ 
  "history": {
    "$elemMatch": {
      "time": { "$gte": startDate, "$lte": endDate }
    }
  }
})

实际上就是这样。更重要的是,您实际上可以“索引”数据,以便可以使用索引进行选择。在上面的其他示例中,这是不可能的,因为我们处理的是“键”而不是“值”,并且本质上需要为每个文档“计算”。

因此,即使您说您现在不能这样做,也确实有一个令人信服的理由来改变结构。请注意,集合中的文档越多,“计算扫描”的实际性能就越差。

关于javascript - 查询嵌套对象键,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/46845615/

相关文章:

javascript - Sails.js 处理属性验证错误

javascript - Node JSON 输出格式错误,无法设置 HTTP header : Content-Length to fix

node.js - Sails.js 是从商店中清除的 session

javascript - jquery点击事件;调用特定函数(如果可用)

javascript - Firestore onSnapshot() 方法多次触发

node.js - Mongoose - 更新文档,添加新 key (具有严格的 :false)

mongodb - 查找数组 A 至少包含数组 B 中的 X 个值的条目

javascript - 字大小随 javascript 中的大小限制而增加

javascript - Fabric.js 中的动画图像

mongodb - 如何使用 MongoDB 选择子文档