【问题标题】:Locking a file for read/write with Node.js使用 Node.js 锁定文件以进行读/写
【发布时间】:2016-10-12 01:06:17
【问题描述】:

我正在寻找执行以下事件序列的能力:

我看到了仅以原子方式编写的价值,但是有什么建议

1. locking a file
2. reading from it
3. writing to it
4. releasing the lock

我们如何做到这一点(使用 Node.js)?假设这个文件存储了简单的 JSON 数据。

【问题讨论】:

    标签: node.js unix concurrency locking


    【解决方案1】:

    即使对于这个简单的用例,我相信如果有其他进程同时访问该文件,您确实需要一种锁定机制。

    我试用了 Lockfile 和 Warlock,但对它们的默认设置以及微调它们的难度印象不深。

    所以我编写了一种不同类型的互斥库,称为“live-mutex”,它不允许轮询,并且是一个完全事件客户端代理模型。它的主要声名是它比锁文件和术士快 15 倍左右。

    检查一下: Github.com/oresoftware/live-mutex

    【讨论】:

    • 您说的非常对 - 令人惊讶的是,每周下载数百万的模块质量如此纯正或根本无法正常工作。你的包裹似乎令人印象深刻。但我更喜欢不需要 TCP 端口的文件锁定解决方案。您对 fcntl 咨询文件锁定有疑问吗?
    • live-mutex 不需要 tcp 端口,您可以使用 Unix Domain Sockets,而且 UDS 的性能也更高,大约是 2 倍。
    • @SimonRigét 用 UDS 试用 live-mutex,看看你的想法
    【解决方案2】:

    您必须确保“原子锁”在节点内部,您可以使用符号链接来实现这一点。下面是一个简单计数器的示例:

    const fs = require('fs');
    
    // the lock function must be a recursive timer
    const flock = (file_name, resolve, reject) => {
      fs.symlink(file_name, 'locked_' + file_name, (err) => {
        if(err)
          if(err.code == 'EEXIST')
            setTimeout(() => {
              flock(file_name, resolve, reject)
            }, 13);
          else
            reject(err);
        else
          resolve();
      });
    }
    
    const counter_increment = async () => {
      file_name = 'counter.txt';
    
      // Lock file
      await new Promise((resolve, reject) => {
        flock(file_name, resolve, reject);
      });
    
      // Read file
      let count = await new Promise((resolve, reject) => {
        fs.readFile(file_name, 'utf8', (err, data) => {
          if (err) resolve(0);
          resolve(parseInt(data));
        });
      });
    
      // Write file
      await new Promise((resolve, reject) => {
        fs.writeFile(file_name,"" + ++count + " ", (err) => {
          if (err) reject(err);
          resolve();
        });
      });
    
      // Unlock file
      fs.unlink('locked_' + file_name, (err) => {
        if (err) console.error(err);
      });
    
      return count;
    };
    
    counter_increment();
    

    与文件锁的真实操作系统实现相比,这很慢,但它可以用于生产。

    节点文件系统库在这一点上是相当不成熟的。 (从节点 11 开始)这个功能现在应该是标准的,但不是。

    模块 fs.ext https://github.com/baudehlo/node-fs-ext/ 添加 真正的操作系统文件锁定。不幸的是,我处理多个请求的方式存在一个错误,这使得它在生产中无法使用。此外,维护人员似乎没有时间修复它。

    我遇到的所有其他模块都做得不是很好。即使是非常受欢迎的。

    【讨论】:

    猜你喜欢
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2019-12-20
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2011-03-17
    相关资源
    最近更新 更多