【问题标题】:Two mongodb collections in one query一个查询中的两个 mongodb 集合
【发布时间】:2015-02-15 14:44:24
【问题描述】:

我有大量客户端和大量客户端数据,这些集合是分开的,我不想将它们组合成一个集合(因为其他已经在工作的 servlet)但现在我需要将两个集合中的数据“合并”到一个结果中。

由于查询应该返回大量结果,我不想查询服务器一次,然后使用结果再次查询。我还关心服务器和数据库之间的流量以及结果集将在服务器 RAM 中占用的内存。

它现在的工作方式是我从“客户”集合中获取相关的客户列表,然后将此列表发送到“客户数据”集合的查询中,然后我才能获得聚合结果。

我想切断从服务器获取和发送客户端列表,让服务器询问自己,让客户端数据收集的查询向客户端收集相关的客户端列表。

如何使用存储过程(javascript 函数)在数据库中进行查询并仅从集合中返回相关客户端。 或者,有没有办法编写一个查询来连接来自另一个集合的结果?

【问题讨论】:

  • 在monogb中没有查询多个集合的选项。一件事是使用ReferenceField或ForienKey

标签: mongodb mongodb-query


【解决方案1】:

“大家好消息”,这个聚合查询在 mongo shell 中作为连接查询工作得很好

db.clientData.aggregate([{
    $match: {
        id: {
            $in: db.clients.distinct("_id",
            {
                "tag": "qa"
            })
        }
    }
},
    $group: {
        _id: "$computerId",
        total_usage: {
            $sum: "$workingTime"
        }
    }
}]);

【讨论】:

    【解决方案2】:

    MongoDB 数据建模的关键思想是重写,而不是重读:以您需要读取的格式存储数据,而不是以某种最小化/避免冗余的格式存储(即使用非规范化数据模型)。​​

    我不想将它们合并到一个集合中

    这不是一个好的论据

    我还担心服务器和数据库之间的流量 [...]

    如果你需要数据,你就需要数据。它的查询方式在这里有何不同?

    [...] 以及结果集将在服务器 RAM 中占用的内存。

    数据量是否如此之大,以至于您想将其从服务器流式传输到客户端,从而以块的形式传输?我们在谈论多少数据,为什么客户端会全部读取?

    如何使用存储过程在数据库中进行查询并仅从集合中返回相关客户端

    MongoDB 中没有存储过程,但可以使用server-side map/reduce to 'join' collections。通常,存储在数据库中并由数据库运行的代码违反了层架构的关注点分离。我认为这是有史以来最丑陋的黑客攻击之一——但这值得商榷。

    另外,少有争议,请记住 M/R 在 MongoDB 中具有巨大的开销,并且不适合实时查询,例如在 Web 服务器调用中。这些调用将花费数百毫秒。

    有没有办法编写一个查询来连接来自另一个集合的结果?

    不,操作仅限于单个集合。您可以执行第二个查询并在那里使用$in 运算符,但是,它类似于子选择并且相当快,但当然需要两次往返。

    【讨论】:

    • 非常感谢您的友好回答。由于其他已经在工作的 servlet,我不想将它们组合成一个集合。它现在的工作方式是我从客户的集合中获取相关的客户列表并将此列表发送到客户端数据集合的查询,然后我才能获得聚合结果。是的,我需要数据,但是我想切断从服务器获取和发送客户端列表,让服务器询问自己,让客户端数据收集的查询为相关客户端询问客户端收集列表。
    • “程序”是指javascript函数
    【解决方案3】:

    如何使用存储过程在数据库中进行查询并仅从集合中返回相关客户端。或者

    mongodb中没有程序

    或者,有没有办法编写一个查询来连接来自另一个集合的结果?

    您通常不需要在 MongoDB 中进行任何联接,也没有这样的事情。文档的灵活性已经处理了典型的连接需求。您应该考虑您的文档模型并询问如何设计模式之外的连接应该始终是您的第一个停靠点。作为替代方案,您可能需要在服务器端使用 aggregation 或 Map-Reduce 来处理此问题。

    【讨论】:

    • 没有类似 SQL 的存储过程,但是有一种方法可以存储类似于过程的 javascript 函数,我相信 OP 想知道这一点。 docs.mongodb.org/manual/tutorial/…
    • @LaszloTenki 你说得对,正如我在回答中所说,他可以在服务器端使用 Map-Reduce。
    【解决方案4】:

    首先,mnemosyn 和 Michael9 是对的。但是,如果我站在你的立场上,还假设客户端数据集合是每个客户端一个文档,我会将客户端数据文档的文档 ID 存储在客户端文档中,以使“加入”(在 Mongo 中仍然没有加入)更容易.

    如果每个客户端有更多的客户端数据文档,则为文档 ID 数组。

    但这一切并没有让你免于必须在你的应用程序代码中实现“加入”,如果它是一个 Rails 应用程序,那么可能在你的控制器中。

    【讨论】:

      猜你喜欢
      • 2016-09-27
      • 2012-05-11
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2020-03-24
      • 2016-12-13
      • 1970-01-01
      • 2021-11-22
      相关资源
      最近更新 更多