【发布时间】:2021-06-19 19:04:37
【问题描述】:
我有一个相当大的图像数据集,我想知道是否有一种方法可以在我的磁盘上的文件上制作 keras model.predict 'dump' 结果,而不是在内存上加载大型 numpy 数组,以避免超出内存问题。
我知道我可以将文件分成小批量并分别处理每个批次,但我想知道是否可以更改 keras(或 python)行为以将结果定向到文件(可能是泡菜对象?)。
【问题讨论】:
-
好的,我突然想到如果我的计算机无法将生成的 numpy 数组保存到内存中,将其转储到 pickle 对象是不好的,因为我以后将无法加载。跨度>