【问题标题】:Prevent multiple service access same document in MongoDB till processing is done防止多个服务访问 MongoDB 中的同一文档,直到处理完成
【发布时间】:2017-12-05 09:29:08
【问题描述】:

我有多个服务实例。该服务访问未处理文档的集合。我们正在使用 MongoDB。服务的作用是:

  1. 从集合 A 中获取第一个未处理的文档。
  2. 使用 uuid 进行 Rest 调用。
  3. 获取响应并将响应存储在另一个集合 B 中。

多个服务可能访问同一个文件导致重复。我能想到的处理这种情况的步骤:

  1. FindandModify() 以及进度字段。所以我们将调用这个函数,查询进度字段为“0”。我们会将值更新为 1,以便其他服务无法访问它。从 Rest 调用获得成功后,我们可以删除记录。失败后,我们将再次调用 FindandModify(),更新值为“0”,以便其他服务稍后可以访问。

  2. 我们调用 Find() 函数,它会给我们一个文档。我们获取文档的“_id”并将其存储到另一个集合中。如果另一个服务也获取相同的文档并且该文档“_id”已经存在。然后它不会再被插入,并且该服务再次调用 Find() 函数。

这些方法的性能和瓶颈是什么。我们还有其他更好的方法可以提高性能吗?

【问题讨论】:

标签: python mongodb nosql mongodb-query microservices


【解决方案1】:

FindandModify() 以及进度字段。所以我们将调用这个函数,查询进度字段为“0”。我们会将值更新为 1,以便其他服务无法访问它。从 Rest 调用获得成功后,我们可以删除记录。失败后,我们将再次调用 FindandModify(),更新值为“0”,以便其他服务稍后可以访问。

这个解决方案还可以,比第二个更简单、更快。

我们调用 Find() 函数,它会给我们一个文档。我们获取文档的“_id”并将其存储到另一个集合中。如果另一个服务也获取相同的文档并且该文档“_id”已经存在。然后它不会再被插入,并且该服务再次调用 Find() 函数。

除非文档在插入第二个集合后从第一个集合中删除,否则此解决方案(如您所介绍的)将不起作用,否则进程将陷入无限循环。缺点是这个解决方案意味着两个集合和文档移动过程。

在任何情况下,您都必须考虑到任何阶段中流程的故障,并且您必须能够检测到故障并从中恢复。

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 1970-01-01
    • 2016-09-13
    • 2016-03-22
    • 2015-10-17
    • 1970-01-01
    • 2020-02-04
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多