在本地缓存 XML 提要的最佳方式是什么？

Question

我有一个 XML 提要，其中包含 1000 多条物业记录（租金、销售）。

目前我在主页上调用这个提要 16 倍，总是只返回 3 个特定标准的属性，例如 3 个新房子、3 个新公寓等、5 个推荐的房子、5 个推荐的公寓等。

这个场景运行了 7 个月，当时有 200 多个属性，每天只有 100-200 次查看。现在已经到了我每天有 700 多次访问和 1000 多个属性并分别下载 16 个提要的阶段，只是为了显示主页越来越慢，流量越来越大。

因此我想缓存这些流，我只希望我的“机器人”直接从源下载流，所有访问者都使用我的本地副本来加快速度并大量减少流量负载。

我在本地下载 XML 和本地调用文件以显示数据没有问题。但我想知道如何解决可能出现的问题，例如：

• 不向客户端显示数据，因为机器人正在更新 XML 文件，并且在加载新数据时原始文件将被覆盖并为空
• 使用 XML 文件作为本地备份，意味着如果源服务器离线，主页仍然可以工作和加载
• 确保我不会以机器人无法更新文件的方式为客户端锁定数据

我的第一个任务是为每个流使用 2 个 xml 文件，一个将显示给客户端，一个将被下载。如果下载正确，则下载的 XML 将用作实时数据，而其他数据将被删除。一种增量标记，一个文件作为实际数据的文件名。

有什么办法可以缓存这些 XML 文件，让它做类似的事情吗？真正的主要问题是要有防弹解决方案，这样客户就不会看到错误页面或空结果。

谢谢。

Answer 1

使用 HttpWebResponse 中内置的缓存选项。这允许您以编程方式选择直接从缓存中获取（忽略新鲜度）、忽略缓存、强制刷新缓存、强制重新验证缓存以及使用缓存的正常行为（如果根据原始响应的年龄认为它是新鲜的）信息，并以其他方式重新验证它。

即使您确实有需要超越的特定缓存要求，也要在正确执行 HTTP 缓存的基础上构建它，而不是完全替代。

如果您确实需要管理自己的 XML 流缓存，那么正常的文件锁定以及如果确实需要，.NET ReaderWriterLockSlims 应该足以防止不同的线程相互混淆。消除过高争用风险的一种可能性是在缓存争用的情况下默认为直接访问。考虑到缓存最终是一种优化（从概念上讲，您是“从服务器”获取文件，缓存只是使这以更有效的方式发生）。因此，如果您未能快速获得读锁，您可以恢复直接下载。这反过来减少了写锁可能发生的等待（因为在请求写锁时，挂起的锁不会随着时间的推移而堆积）。在实践中，它可能不会经常发生，但它会让您避免围绕一个文件建立不可接受的争用并导致整个系统崩溃的风险。

Answer 2

我将首先假设您不拥有生成源 XML 提要的代码？因为如果你这样做，我会考虑为你想要运行的查询添加一些特定的支持。

我在使用第三方提要时遇到了类似的问题，我构建了一个每天运行几次的作业，下载提要并对其进行解析，并将结果本地存储在数据库中。

每次更新数据库时都需要进行一些比较，并且只添加新记录并删除旧记录，但这可以确保您始终有数据可以提供给您的客户，并且数据库可以解决文件等简单问题锁定。

然后我会看一个简单的服务层来公开本地存储中的数据。