分块解析大型json响应[重复]

Question

是否有一种可接受的方式来解析 Python 中的大型 json 响应/文件？明确地说，我的意思是：

1. 无法一次将数据全部加载到内存中。
2. 除了合法的 json 数据，你对数据一无所知。

3. 输出格式应该是易于读取的块（例如，由换行符或 YAMl 分隔。）

   这是经典的 json 问题，我已经看过很多其他关于此的帖子，但它们通常围绕特定的 json 表示。这里的关键是你对 json 一无所知。

   我知道如何自己构建解析器来执行此操作，但这样做真的很糟糕。我希望已经有一个公认的 Python 解决方案。

   谢谢。

Answer 1

你可以试试ijson。它提供了基于事件的迭代器，比从头编写自己的迭代器更容易。