javascript - Mongodb 并行运行数千个查询

Question

我们有一个 PHP 应用程序，在 mongo 集合中运行 30k 个唯一查询时表现良好。

foreach ($request->numbers as $number) {
    $query = [
        'cn' => $ddd,
        'prefix_init' => array('$lte' => (int) $mobile),
        'prefix_final' => array('$gte' => (int) $mobile)
    ];

    $result = $cadup_full->findOne($query);
    $results[] = $result;
}

我们在 NodeJS 中转换了该应用程序，并开始出现性能问题，因为在 PHP 中查询是以同步方式触发的，而 NodeJS 循环使所有 30k 程序同时运行，从而导致性能下降。

如何利用仍使用 Nodejs 运行这些查询的优势？

Answer 1

正如 JohnnyHK 提到的，您可以使用 async ，具体来说mapLimit .

我不懂 PHP，所以这里是对它在 Node 中的等效语法的伪/粗略猜测。

// max number of requests running at once
let concurrencyLimit = 10;

async.mapLimit(numbers, concurrencyLimit, function(number, numberCallback) {

    let query = {
        "cn": ddd,
        "prefix_init": {
            $lte: number
        },
        "prefix_final": {
            $gte: number
        }
    }

    // where numberCallback is function(error, document);
    myCollection.findOne(query, numberCallback);

}, function(error, results) {

    // here is your results array;
    console.log(results);
});