在某些环境中文件中缺少字符

Question

这对我来说是全新的，我不知道从哪里开始。我有一个 Dictionary 子类，它从本地网络上的旧纯文本文件加载数据以填充自身。

文件有一些标题行，然后是数据（每行由一行破折号分隔），直到每页设定的行数 (59)，之后标题重复。

最近有需求增加对最初不需要的数据的支持。此数据没有相同数量的标题列。相反，我决定在每组数据中寻找一个特殊字符。代码如下所示：

/// <summary>
/// Load the work order information from the chart on the network.
/// </summary>
/// <param name="workOrder">Work order to load</param>
/// <param name="model">Model number of the work order to load. Loaded from MES if null.</param>
public WorkOrderInformation(String workOrder, String model)
{
    if (model == null)
        model = MES.getOrder(workOrder).Model;

    String fileLocation = Path.Combine(Path.Combine(WorkOrderLocation, model), workOrder.Insert(4, "-") + ".TXT");

    StreamReader file = new StreamReader(File.Open(fileLocation, FileMode.Open, FileAccess.Read));

    int currentLineNumber = 0;
    while (!file.EndOfStream)
    {
        string line = file.ReadLine();
        Logging.Log.writeLog(log, "Loaded line | " + line);
        currentLineNumber++;
        int lineOnPage =(currentLineNumber % 59);
        // Old way to determine if line contains data
        //if (lineOnPage >= 10 && lineOnPage % 2 == 0)
        if (line.Contains(((char)65533).ToString()))
        {
            Logging.Log.writeLog(log, "Line added to collection");
            string[] sections = line.Split(new char[] { '|' });

            if (sections.Length > 1)
            {
                UnitInfo newUnit = new UnitInfo(sections[0].Trim());
                for (int j = 1; j < sections.Length; j++)
                {
                    newUnit.Add(sections[j].Trim());
                }
                this.Add(newUnit.TestNumber,newUnit);
            }
        }
    }
    file.Close();
}

在我的开发机器 (Windows 7) 和一台部署机器 (Windows 2000) 上，它运行良好。在另一台部署机器 (Windows XP) 上，该字符根本不在行中。如果我检查我的日志，当我记录完整的行和记录“添加到集合的行”的语句时没有写入字符。

我在所有 3 台机器上的同一个文件上运行它。

编辑：

我已更改我的日志记录以存储加载的行的长度而不是行本身，并确认该字符只是从 string 中丢失。在它工作的机器上，日志说这些行的长度为 65 个字符，而在没有的机器上是 64 个。

编辑 2：

我决定重新考虑这个问题。我决定提前拆分字符串并检查第一个值是否是数字，而不是搜索那个特殊字符：

double dummy;
if(double.TryParse(sections[0],out dummy))

这完成了我的工作，但我仍然很好奇为什么会发生这种情况，并且会留下这个问题，希望至少能得到解释。

编辑 3：

似乎比我想象的更多。正如Dan 指出的那样，我正在搜索的值（0xFFFD）实际上是replacement character，它显然不应该是。无法从打印输出中识别字符我在十六进制编辑器中打开文件并发现字符问题应该是 0x00F8 (ø)。

看来 StreamReader 要么加载 0x00F8 作为替换字符，要么根本不加载。现在的问题是为什么？

Answer 1

我非常好奇您是如何得出以下代码的：

if (line.Contains(((char)65533).ToString()))

Unicode 65533 或 0xFFFD 是称为replacement character 的特殊字符。此字符的目的是用来代替一些未知或无法表示的字符。

因此，它出现在一行文本中通常表示有一些其他字符由于某种原因无法复制。原因可能是编码、字体等。

您期望找到这个符号这一事实似乎是一个根本缺陷。你希望这个角色来自哪里？它会如何在文件中结束？