【问题标题】:Reading a Delphi binary file in Python在 Python 中读取 Delphi 二进制文件
【发布时间】:2010-04-27 03:20:36
【问题描述】:

我有一个使用以下 Delphi 声明编写的文件...


Type
  Tfulldata = Record
    dpoints, dloops : integer;
    dtime, bT, sT, hI, LI : real;
    tm : real;
    data : array[1..armax] Of Real;
  End;

...
Var:
  fh: File Of Tfulldata;

如果可能,我想使用 Python 分析文件中的数据(大小为许多 MB) - 是否有一种简单的方法可以读取数据并将数据转换为形式类似于 Delphi 记录的 Python 对象?有谁知道图书馆可能会这样做?

这是在 Delphi 7 上编译的,带有以下可能(或可能不)相关的选项,

  • 记录字段对齐:8
  • 奔腾安全 FDIV:错误
  • 堆栈帧:错误
  • 优化:是的

【问题讨论】:

  • 您需要知道Real 在编译Delphi 代码时的含义。在较新的代码中,它是Double 的别名,这是普通的 IEEE 64 位浮点数。在较旧的 Delphi 版本中,它就是现在所谓的 Real48,我从未见过在其他任何地方实现它(尽管 Stack Overflow 上有几个关于在 C# 中将这些 6 字节类型转换为 double 的问题,这可能对您自己的努力有用)。
  • 你知道这是用哪个Delphi版本编译的吗?
  • 代码在Delphi 7中编译

标签: python delphi file-io


【解决方案1】:

感谢 KillianDS 和 Ritsaert Hornstra 的提示,这里是完整的解决方案

import struct
fh = open('my_file.dat', 'rb')
s = fh.read(40256)
vals = struct.unpack('iidddddd5025d', s)
dpoints, dloops, dtime, bT, sT, hI, LI, tm = vals[:8]
data = vals[8:]

【讨论】:

  • 如果 armax=5024 那么你似乎有一个错误。也许有一个错字,你的意思是 5025?
  • 是的,armax=5025,我在内存中工作,我最近调整了值,以便数据数组为零索引并感到困惑 - 我觉得 Delphi 有动态/打开很烦人数组索引为零,但许多函数(即 Copy())从一个开始 ...
  • 动态数组从零开始,默认情况下只有字符串从 1 开始(由于历史原因)。当你自己定义一个数组时,这些偏移量会在任何地方使用。
  • 好吧,我想 - 但是您可能会认为,当您将静态的单索引数组传递给修改数组的过程时,在该过程内部,该数组也应该是单索引的,但它是转换为开放数组并变为零索引。 High() 和 Low() 函数有助于找到限制,但在我的情况下,传递的静态数组没有完全使用,并且传递了一个单独的 numValidPoints 参数 - 所以零索引/一个索引确实很重要。为避免歧义,我将所有数组更改为零索引。
  • 请注意,您还应该能够使用相同的结构格式描述创建numpy.dtype,然后只需使用numpy.fromfile(filename, dtype=data_type) 即可一口气阅读整个内容,而不必担心打开、关闭并分块读取文件。没有尝试过,但我相信您甚至可以创建一个更复杂的dtype,以便能够使用成员定义整个结构并创建类似于命名元组的东西
【解决方案2】:

我不知道 Delphi 内部如何存储数据,但如果它是简单的字节数据(所以没有序列化和损坏),请使用struct。这样,您可以将 python 文件中的字符串视为二进制数据。另外,打开二进制文件file(open,'rb')。

【讨论】:

    【解决方案3】:

    请注意,当您在 Delphi 中定义记录时(如 C 中的结构),字段按顺序排列,并且在给定当前对齐方式的情况下以二进制形式排列(例如,字节在 1 字节边界上对齐,字在 2 字节上,整数在4 字节等,但根据编译器设置可能会有所不同。

    当序列化到文件时,您可能意味着这条记录以二进制形式写入文件,下一条记录在第一个记录之后写入,从位置 sizeof(struct) 等开始。Delphi 没有指定应该如何处理序列化到/从文件,所以你提供的信息让我们猜测。

    如果您想确保它始终相同而不受任何编译器设置的干扰,请使用打包记录。

    Real 可以有多种含义(对于较旧的 Delphi 版本,它是 48 位浮点类型,后来是 64 位浮点(IEEE 双精度))。

    如果您无法访问 Delphi 代码或自己编译它,只需使用 HEX 编辑器检查数据,您应该清楚地看到记录的边界,因为它们以整数开头,只有浮点数跟随。

    【讨论】:

    • 注意:由于结构体末尾有数组类型,所以数组可以是可变大小的
    • 我确实可以访问读取和写入数据的代码 - 似乎在代码本身中唯一相关的行是问题中的行。我已经指定了一些看起来很重要的选项。我还查看了 HEX 编辑器,虽然这对我来说是陌生的领域 - 有很多随机字符被大块 '00' 字符分隔......
    • 数组大小也用常量声明-armax = 5024
    • 好的,我想我掌握了 HEX 编辑器的窍门,我必须单独解码每个数字。似乎“真实”在这里转换为 64 位 IEEE754 双打
    • @Brendan:那么现在你有足够的信息来解码结构和整个文件了吗?
    猜你喜欢
    • 1970-01-01
    • 2011-12-26
    • 1970-01-01
    • 2012-02-01
    • 1970-01-01
    • 1970-01-01
    • 2017-11-27
    相关资源
    最近更新 更多