javascript - Mongodb:在 $group 之后使用 $sample

标签 javascript node.js mongodb

我有以下数据集:

{company:"One",  employee:"John"},
{company:"One",  employee:"Mike"},  
{company:"One",  employee:"Donald"},  
{company:"One",  employee:"Mickey"},  
{company:"Two",  employee:"Johnny"},  
{company:"Two",  employee:"David"}, 

理想情况下,我想要一个返回所有不同公司、每家公司的员 worker 数、每家公司的随机员工的查询

{Company: "One" , employee_count=4, randomemployee="Donald"},
{Company: "Two" , employee_count=2, randomemployee="David"},

我确实找到了一种使用聚合/组获取公司和员 worker 数的方法 但是我找不到使用相同查询添加 randomemployee 的方法。

我的聚合:

function aggr (collection,cb){
   collection.aggregate(([{$group:{_id:'$company',total:{$sum:1}}},{$sort:{total:-1}}]),function(err, l1){
   cb(null, l1)
})
}

我开始了另一个示例函数:

function onesample (collection,arg,cb){
    collection.aggregate(([{ $match: { "company": arg }},{ $sample: { size: 1 }}]),function(err, item){
   cb(null, item[0].employee)
})
}

但是我在回调和循环中失去了 self 。 有什么优雅的方法可以在一个查询中执行此操作?

非常感谢。

根据您的回答,我尝试了以下代码。 我对 async.foreachof 的回调有疑问,似乎在进入下一步之前它还没有完成:有什么线索吗?

var async = require("async");   
var MongoClient = require('mongodb').MongoClient;
var assert = require('assert');
var url = 'mongodb://localhost:27017/eyc0';



async.waterfall ([
     function(cb) { 
            MongoClient.connect(url, function(err, db) {
            cb(null,db)
             })
    },
     function (db, cb) {
             db.collection('kodes', function(err, coll) {
            cb(null,db,coll)
             })
    },
      function (db,coll, cb) {
                 var pipeline = [
                {"$group": {"_id": "$ouat","total": { "$sum": 1}}},
                {"$sort":{"total":-1} },
                {"$project":{"_id": 0,"total":1,"company": "$_id"}}];

                coll.aggregate(pipeline).toArray(function(err, dlist){
                cb(null,db,coll,dlist)
                })
    },
        function (db,coll,dlist, cb) {
            // console.log(dlist)
            cb(null,db,coll,dlist)
    },
          function (db,coll,dlist, cb) {
             var dlist2 = []
                async.forEachOf( 
                    dlist,
                    function(item, key, cb){
                        var pipeline = [{ "$match": { "ouat": item.company } },{ "$sample": { size: 1 } }];
                        coll.aggregate(pipeline, function (err, data) {
                        item["randref"] = data[0].code;
                        console.log(item.company)
                        dlist2.push(item)
                        cb()
                    });

                    }
                );
                 cb(null,db,coll,dlist,dlist2);

    },
        function (db,coll,dlist,dlist2, cb) {
            console.log(dlist2)
            console.log(dlist)
    },
    ])

最佳答案

有一种方法涉及一个查询,它可能接近但性能不佳(因为它使用 $unwind )并且不会为您提供所需的结果(仅过滤公司):

var pipeline = [
    {
        "$group": {
            "_id": "$company",
            "total": { "$sum": 1 },
            "employees": { "$push": "$employee" }
        }
    },
    {
        "$project": {
            "_id": 0,
            "company": "$_id",
            "employee_count": "$total"
            "randomemployee": "$employees"
        }
    },
    { "$unwind": "$randomemployee" },
    { "$match": { "company": arg } },
    { "$sample": { size: 1 } }
];
collection.aggregate(pipeline, function(err, result){
    console.log(result);
});

但是,对于使用来自多个查询的回调的解决方案,可以使用 async 轻松处理。 模块。

要获得所有不同的公司、每家公司的员 worker 数、每家公司的随机员工,请考虑使用 async.waterfall() 函数,其中第一个任务返回所有不同公司的聚合结果以及每个公司的员 worker 数。

第二个任务使用上面任务 1 的结果使用 async.forEachOf() 进行迭代。这允许您为每个项目执行异步任务,并在它们全部完成后执行其他操作。对于数组中的每个文档,运行使用 $sample 的聚合操作 运算符(operator)获取指定公司的随机文件。对于每个结果,创建一个包含随机员工的额外字段,并将其推送到一个包含最终结果的数组,您可以在每个任务结束时访问该数组。

下面展示了这种方法:

var async = require("async");    
async.waterfall([

        // Load full aggregation results (won't be called before task 1's "task callback" has been called)
        function(callback) {
            var pipeline = [
                {
                    "$group": {
                        "_id": "$company",
                        "total": { "$sum": 1 }                      
                    }
                },
                {
                    "$project": {
                        "_id": 0,
                        "company": "$_id",                      
                        "employee_count": "total"
                    }
                }
            ];
            collection.aggregate(pipeline, function(err, results){
                if (err) return callback(err);
                callback(results);
            });
        },

        // Load random employee for each of the aggregated results in task 1
        function(results, callback) {
            var docs = []
            async.forEachOf(                
                results,
                function(value, key, callback) {                    
                    var pipeline = [                                
                        { "$match": { "company": value.company } },
                        { "$sample": { size: 1 } }
                    ];
                    collection.aggregate(pipeline, function (err, data) {
                        if (err) return callback(err);
                        value["randomemployee"] = data[0].employee;
                        docs.push(value);
                        callback();
                    });
                },
                function(err)
                    callback(null, docs);
                }
            );
        },
    ], function(err, result) { 
        if (err) return next(err);            
        console.log(JSON.stringify(result, null, 4));
    }
);

随着 async.series() 函数,如果您需要按特定顺序执行一组异步函数,这将很有用。

如果您希望将所有不同的公司及其员工算作一个结果,而将另一个随机员工算作另一个结果,请考虑以下方法:

var async = require("async"),
    locals = {},
    company = "One";
async.series([
        // Load random company
        function(callback) {
            var pipeline = [                                
                { "$match": { "company": company } },
                { "$sample": { size: 1 } }
            ];
            collection.aggregate(pipeline, function(err, result){
                if (err) return callback(err);                
                locals.randomcompany = result[0];
                callback();
            });            
        },
        // Load full aggregation results (won't be called before task 1's "task callback" has been called)
        function(callback) {
            var pipeline = [
                {
                    "$group": {
                        "_id": "$company",
                        "total": { "$sum": 1 }                      
                    }
                },
                {
                    "$project": {
                        "_id": 0,
                        "company": "$_id",                      
                        "employee_count": "total"
                    }
                }
            ];
            collection.aggregate(pipeline, function(err, result){
                if (err) return callback(err);                
                locals.aggregation = result;
                callback();
            });
        }
    ], function(err) { //This function gets called after the two tasks have called their "task callbacks"
        if (err) return next(err);
        //Here locals will be populated with 'randomcompany' and 'aggregation'
        console.log(JSON.stringify(locals, null, 4));
    }
);

关于javascript - Mongodb:在 $group 之后使用 $sample,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/35311956/

相关文章:

javascript - Nodejs 为什么用原型(prototype)静态初始化数组?

javascript - 处理多个http调用和多个响应

node.js - 带有嵌套可选对象和必填字段的 Mongoose 模式

mongodb - 如何部分更新 MongoDB 中的对象,以便新对象与现有对象重叠/合并

javascript - 从 URL 将变量传递到简单模态弹出窗口

javascript - 谷歌地球问题

node.js - express 项目打印 "linux is NOT supported"没有解释

javascript - 我可以通过Javascript在Flash(AS2)中设置变量吗

javascript - Node.js - Async.js map 函数仅显示上次迭代的结果?

c++ - 使用 mongodb c++ 驱动程序查询嵌套的 BSON 文档