读取很多文件会导致内存问题？

Question

我正在搜索系统上的许多文件，以在其中查找我正在编写的计算机搜索程序的文本。但是，当读取较大的文件时，这些行会保留在内存中，使其使用超过 GB 的内存。我想知道问题是什么。这是我的代码。

    private int SearchInFile(SearchResult searchResult, Options options) {
        if (searchQuery.inFile.Length == 0) return -1;
        if (!options.searchOnlyInTextFiles || searchResult.type.Equals(".txt")) {
            try {
                int index = 0;
                foreach(string line in File.ReadLines(searchResult.path)) {
                    index++;
                    if (line.Contains(searchQuery.inFile)) return index;
                }
            } catch(Exception e) {
                Console.WriteLine(e);
            }
        }
        return -1;
    }

Answer 1

您应该打开一个流，例如 FileStream，并且一次只能读取 1024 个字节。您应该检查字节，并仅在 RAM 中建立当前行，直到找到一个新行字符，然后在该行中查找您要查找的文本。这样，您只需将当前正在检查的行保留在 RAM 中。

您需要注意如何定义行尾。不同的文本文件有不同的方式来定义行的结束位置。除此之外，您还需要了解 .txt 文件的编码方式、UTF8、ASCII 等。

如果你小心，你可以确保你的应用程序永远不会使用超过一定数量的 RAM，并且垃圾收集器不那么忙。