【问题标题】:FileSystemWatcher not working even once except for root folder having 320K subdirectories除了具有 320K 子目录的根文件夹外,FileSystemWatcher 甚至一次都无法工作
【发布时间】:2021-02-18 11:02:05
【问题描述】:

我正在使用下面的代码来监控目录中发生的更改,包括子目录。目前,我正在运行此应用程序的三个不同副本,其中两个运行良好。无法运行的应用程序中包含超过 320K 的子目录。

我尝试增加InternalBufferSize,但没有任何反应。 它适用于根文件夹,不适用于任何子目录。

此外,同一应用程序的另外 2 个副本在不同地理位置监控不同的网络路径也可以正常工作,包括子目录。

FileSystemWatcher watcher = new FileSystemWatcher
{
    Path = path,
    IncludeSubdirectories = true,
    Filter = "*.txt",
    NotifyFilter = NotifyFilters.LastAccess | NotifyFilters.LastWrite |
        NotifyFilters.FileName | NotifyFilters.DirectoryName
};
watcher.Created += Watcher_Created;
watcher.Changed += Watcher_Changed;
watcher.Deleted += Watcher_Deleted;
watcher.Renamed += Watcher_Renamed;
watcher.Error += Watcher_Error;
watcher.EnableRaisingEvents = true;

PS:轮询不是一种选择。完整扫描 320K 目录需要 3 天时间。 根级文件夹有2000多个子目录,每个子目录最多有8级子文件夹

Edit-1:我已与 INFRA 团队核实,得知共享文件夹位于 EMC Isilon NAS 存储上。

https://social.msdn.microsoft.com/Forums/vstudio/en-US/38adb37d-bbfc-40d6-8b32-a5c1c7d8d4a3/are-there-any-limitations-of-filesystemwatcher-monitoring-a-unc-path-on-nas-server?forum=netfxbcl

【问题讨论】:

  • 320K的子目录都直接放在watched目录下,还是形成了很深的层次结构?第二种情况,子目录怎么可能在被监视的目录下呢?
  • 您是否检查过在根级别为每个子目录实例化一个FileSystemWatcher 是否可行?
  • 顺便说一句,请注意来自documentation 的建议:“尽可能缩短事件处理代码。” 如果您在事件中做任何耗时的事情处理程序,无论InternalBufferSize 有多大,有这么多子目录,几乎可以肯定你会丢失通知。理想情况下,您应该只将消息推送到队列,以供另一个工作流进一步处理。
  • @TheodorZoulias 对子目录进行任何更改时都不会触发任何事件。事件只是将接收到的信息转储到 SQLite 数据库表中。相同的代码适用于其他 2 个文件夹,它们在整个层次结构中有大约 100k 个文件夹
  • @TheodorZoulias 如果我在根级别为每个子目录初始化一个 FileSystemWatcher,下一层的子目录也会出现同样的问题。此更改仅适用于当前级别。

标签: c# windows-services console-application filesystemwatcher


【解决方案1】:

与同步执行事件处理程序不同,将它们卸载到ThreadPool 可能会有所帮助。这将最大限度地减少溢出FileSystemWatcher 的内部缓冲区的风险。下面的Offload 方法可以用于此目的:

public static FileSystemEventHandler Offload(FileSystemEventHandler handler)
{
    return (s, e) => ThreadPool.QueueUserWorkItem(_ => handler(s, e));
}

使用示例:

var fsw = new FileSystemWatcher(path);
fsw.Created += Offload((s, e) =>
{
    Console.WriteLine($"Created: {e.Name}");
});

这并不是一个有效的解决方案,而只是作为缓冲区溢出问题的简单解决方案(假设它是您观察到的问题的原因)。

【讨论】:

  • 我面临的问题是,如果我在根目录中添加一个文件,即使在一天之后,也会触发事件,但是如果我在任何直接/下级子目录中添加/删除/重命名/更改文件,则不会事件被触发。
猜你喜欢
  • 1970-01-01
  • 2014-01-10
  • 2015-09-02
  • 1970-01-01
  • 2015-12-11
  • 1970-01-01
  • 1970-01-01
  • 2018-08-09
  • 2015-04-06
相关资源
最近更新 更多