为什么 BinaryFormatter 试图序列化太多数据？

Question

这个问题是SerializationException when serializing lots of objects in .NET 的后续问题。

情况：我有一个节点网络，这些节点都是相互连接的，每个节点可能有 10-30 个变量和/或引用。该网络大约有 900 万个条目，但我已经裁剪了 11,000 个条目的一部分，并切断了指向网络其余部分的引用。

我正在尝试将这部分网络写入磁盘，但出现以下错误：

System.Runtime.Serialization.SerializationException
"The internal array cannot expand to greater than Int32.MaxValue elements."

注意：正如stuartd 所指出的，可以序列化的项目数量限制为6 million。

最可能的原因是我不知道与其他网络的连接仍然存在，但是我已经非常详细地搜索了代码，试图找到可能存在的连接，但是没有任何运气（我会继续寻找，所以这可能仍然是原因，但我也想探索其他途径）。

问题：我可能会遇到 BinaryFormatter 的哪些陷阱/容易犯的错误？我能做些什么来克服这个大小限制？

编辑：添加序列化代码。 “this”是我的包含 11,000 个节点的网络对象。

    Stream testFileStream = File.Create(filename);
    BinaryFormatter serilizer = new BinaryFormatter();
    serilizer.Serialize(testFileStream, this);
    testFileStream.Close();

Answer 1

人们正在忽略您的问题，因为它不够具体，无法回答。
但对 BinaryFormatter 有所了解可能会有所帮助。

所以你可能想要做的就是完全避免序列化，只做你自己的读和写。喜欢这个问题...

BinaryFormatter alternatives

如果你完全避免 BinarySerializer，就不会有任何元素计数导致异常。但是 BinarySerializer 确实可以保护自己免受无限循环和其他事情的影响，如果您要序列化某种网络节点图，则必须考虑到这些事情。工作量很大。

在我们进一步了解之前，BinaryFormatter 会序列化私有变量以及公共变量。有没有可能您在私有变量中存储了大量的内容并且没有将其计为每个对象 30 字节的一部分？

为什么要避免序列化？更深入地研究 BinaryFormatter，我们发现它有很多开销，允许它从 DLL 的多个版本流式传输数据，它存储私有变量名称以防您重新排序类中的字段。它有特点。如果您不需要功能并且想要快速的性能，请避免使用它。

示例。

    [Serializable]
    class Widgt2
    {
        private string _fieldWithMuchLongerName = "XXX";
    }

如果你只是将它序列化为内存流，然后查看你得到的字节......

   "\0\0\0\0ÿÿÿÿ\0\0\0\0\0\0\0\f\0\0\0@SOAnswers, Version=1.0.0.0, Culture=neutral, PublicKeyToken=null\0\0\0SOAnswers.Serialzation1+Widget2\0\0\0_fieldWithMuchLongerName\0\0\0\0\0\0XXX\v"

存储字符串“XXX”需要大量字节。如果您存储像 List 这样的重复，二进制格式化程序会变得更有效率。但它仍然具有意味着开销的功能。