如何在不加载整个 json 文件的情况下提取键值

Question

我得到了一个巨大的 JSON 文件列表，是否可以在 python 请求中不加载整个 json 文件的情况下提取键值。 This is how it looks

Answer 1

您需要增量 JSON 解析器或流式 JSON 解析器，例如 yajl-py。但是，它总是从头开始，所以如果你的关键是文件的最后，这种方法对于从磁盘或网络加载没有多大帮助。

直到 key 的所有 JSON 内容都必须通过解析器的内存，但不是一次全部在内存中。

正如@Jacob 在 cmets 中提到的，我不会将 1.8 MB 视为“巨大”文件。我已经在处理几个 GB 范围内的文件了。这绝对是您需要考虑耗尽物理 RAM 的地方。