【问题标题】:Reading fortran binary (streaming access) with np.fromfile or open & struct使用 np.fromfile 或 open & struct 读取 fortran 二进制文件(流式访问)
【发布时间】:2017-01-17 12:21:18
【问题描述】:

以下 Fortran 代码:

INTEGER*2 :: i, Array_A(32)
Array_A(:) = (/ (i, i=0, 31) /)

OPEN (unit=11, file = 'binary2.dat', form='unformatted', access='stream')
    Do i=1,32
        WRITE(11) Array_A(i)
    End Do 
CLOSE (11)

使用 0 到 31 的整数 16 位生成流式二进制输出。每条记录占用 2 个字节,因此它们被写入字节 1、3、5、7 等等。 access='stream' 为每条记录抑制 Fortran 的标准标头(我需要这样做以使文件尽可能小)。

用十六进制编辑器查看它,我得到:

00 00 01 00 02 00 03 00 04 00 05 00 06 00 07 00 
08 00 09 00 0A 00 0B 00 0C 00 0D 00 0E 00 0F 00
10 00 11 00 12 00 13 00 14 00 15 00 16 00 17 00
18 00 19 00 1A 00 1B 00 1C 00 1D 00 1E 00 1F 00

这完全没问题(尽管第二个字节从未使用过,因为在我的示例中小数太小了)。

现在我需要将这些二进制文件导入 Python 2.7,但我不能。我尝试了很多不同的套路,但总是失败。

1.尝试:“np.fromfile”

with open("binary2.dat", 'r') as f:
    content = np.fromfile(f, dtype=np.int16)

返回

[    0     1     2     3     4     5     6     7     8     9    10    11
    12    13    14    15    16    17    18    19    20    21    22    23
    24    25     0     0 26104  1242     0     0]

2。尝试:“结构”

import struct
with open("binary2.dat", 'r') as f:
    content = f.readlines()
    struct.unpack('h' * 32, content)

交付

struct.error: unpack requires a string argument of length 64

因为

print content
['\x00\x00\x01\x00\x02\x00\x03\x00\x04\x00\x05\x00\x06\x00\x07\x00\x08\x00\t\x00\n', '\x00\x0b\x00\x0c\x00\r\x00\x0e\x00\x0f\x00\x10\x00\x11\x00\x12\x00\x13\x00\x14\x00\x15\x00\x16\x00\x17\x00\x18\x00\x19\x00']

(注意分隔符、t 和 n 根据 Fortran 的“流式”访问所做的不应该存在)

3。尝试:“FortranFile”

f = FortranFile("D:/Fortran/Sandbox/binary2.dat", 'r')
print(f.read_ints(dtype=np.int16))

出现错误:

TypeError: only length-1 arrays can be converted to Python scalars

(记住它是如何在文件中间检测到分隔符的,但对于没有换行符的较短文件(例如从 0 到 8 的小数),它也会崩溃)

一些额外的想法:

Python 似乎无法读取部分二进制文件。对于np.fromfile,它读取Hex 19(12 月:25),但对于Hex 1A(12 月:26)崩溃。它似乎与字母混淆了,虽然 0A、0B ... 工作得很好。

对于尝试 2,content-result 很奇怪。小数 0 到 8 可以正常工作,但是有一个奇怪的 \t\x00\n 事情。那么hex 09 是怎么回事?

我已经花了好几个小时试图找到逻辑,但我被困住了,真的需要一些帮助。有什么想法吗?

【问题讨论】:

    标签: python io binary hex


    【解决方案1】:

    问题在于打开文件模式。默认为“文本”。将此模式更改为二进制:

    with open("binary2.dat", 'rb') as f:
        content = np.fromfile(f, dtype=np.int16)
    

    所有数字都将被成功读取。有关详细信息,请参阅深入了解 Python 章节 Binary Files。

    【讨论】:

    • 天啊,是一个字母吗?我怎么会看不到这个......好吧,无论如何,非常感谢你 - 拯救了我的一天!
    猜你喜欢
    • 1970-01-01
    • 2016-10-21
    • 2021-12-08
    • 2018-11-29
    • 1970-01-01
    • 2012-04-29
    • 2018-11-24
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多