【问题标题】:Synchronize critical section in API for each user in JavaScript在 JavaScript 中为每个用户同步 API 中的关键部分
【发布时间】:2020-07-03 12:17:24
【问题描述】:

我想交换用户的个人资料图片。为此,我必须检查数据库以查看是否已保存图片,如果已保存,则应将其删除。然后应该保存新的并输入数据库。

这是一个简化(伪)代码:

async function changePic(user, file) {
  // remove old pic
  if (await database.hasPic(user)) {
    let oldPath = await database.getPicOfUser(user);
    filesystem.remove(oldPath);
  }
  // save new pic
  let path = "some/new/generated/path.png";
  file = await Image.modify(file);
  await Promise.all([
   filesystem.save(path, file),
   database.saveThatUserHasNewPic(user, path)
  ]);
  return "I'm done!";
}

我遇到了 以下问题:
如果用户在短时间内调用 API 两次,就会出现严重错误。数据库查询和其间的函数是异步的,导致当第二个 API 检查要删除的配置文件图片时,没有应用第一个 API 调用的更改。所以我留下了filesystem.remove 请求文件系统中已经不存在的文件和未删除的图像。

我想通过同步这段代码的关键部分来安全地处理这种情况。我不想仅仅因为服务器还没有完成前一个请求而拒绝请求,我也想为每个用户同步它,因此用户不会被其他用户的操作所困扰。

有没有一种简洁的方法可以在 JavaScript 中实现这一点?某种 monitor 就像你从 Java 中知道的那样会很好。

【问题讨论】:

  • 您正在检查文件是否存在于数据库中,但也不存在于文件系统中。如果您在remove() 之前进行额外检查以确保该文件存在于文件系统上,那应该会阻止致命错误的发生。
  • @SundayCode 我已经这样做了。主要问题是这甚至是必要的,并且文件系统中的文件在数据库中没有指针。我还阻止用户在客户端向 API 发送垃圾邮件。但这不是万无一失的方式,因为用户仍然可以从不同的设备或标签页请求 API。
  • 您是否在您提供的代码中这样做?也许我弄错了,我只看到filesystem.remove(oldPath))。那是在删除之前检查路径的自定义方法吗?我唯一能想到的另一件事是在数据库 ORM 中执行原子事务,这样只有在从文件系统中删除图像后才会删除数据库中的图像记录。
  • @SundayCode 对不起。正如我所说,我简化了代码。我不希望“所以我留下一个 filesystem.remove 对一个已经不存在的文件的请求......”这部分听起来像是抛出了一个我无法处理的错误。 “严重错误”是指用database.hasPic(它本身也是对大约20行代码的简化)和代码sn-p的洞概念的不可靠检查
  • 使用数据库事务,并处理因删除不存在的文件而导致的错误。

标签: javascript node.js express synchronization critical-section


【解决方案1】:

您可以使用像 p-limit 这样的库来控制您的并发性。使用地图跟踪每个用户的活动/待处理请求。使用他们的 ID(我假设存在)作为键和限制实例作为值:

const pLimit = require('p-limit');

const limits = new Map();

function changePic(user, file) {
  async function impl(user, file) {
    // your implementation from above
  }

  const { id } = user // or similar to distinguish them

  if (!limits.has(id)) {
    limits.set(id, pLimit(1)); // only one active request per user
  }

  const limit = limits.get(id);
  return limit(impl, user, file); // schedule impl for execution
}

// TODO clean up limits to prevent memory leak?

【讨论】:

  • 这正是我想要的。在 npm 上每周有 2800 万次下载,很遗憾我在自己寻找解决方案时错过了它。谢谢。
猜你喜欢
  • 1970-01-01
  • 2010-09-29
  • 1970-01-01
  • 2014-04-04
  • 1970-01-01
  • 1970-01-01
  • 2017-03-26
  • 1970-01-01
相关资源
最近更新 更多