Python 将 JSON 转换为 CSV 类型错误答案

【问题标题】：Python Converting JSON to CSV TypeErrorPython 将 JSON 转换为 CSV 类型错误
【发布时间】：2018-05-17 13:30:37
【问题描述】：

我正在尝试从来自 PushShift API 但遇到 TypeError 的 JSON 数据写入 CSV 文件。我的代码如下

import requests
import csv
import json
from urllib.request import urlopen

url = 'https://api.pushshift.io/reddit/comment/search/?subreddit=science&filter=parent_id,id,author,created_utc,subreddit,body,score,permalink'
page = requests.get(url)
page_json = json.loads(page.text)
print(page.text)
f = csv.writer(open("test.csv",'w+', newline=''))
f.writerow(["id", "parent_id", "author", "created_utc","subreddit", "body", "score"])
for x in page_json:
f.writerow([x["data"]["id"],
            x["data"]["parent_id"],
            x["data"]["author"],
            x["data"]["created_utc"],
            x["data"]["subreddit"],
            x["data"]["body"],
            x["data"]["score"]])

我得到的错误是：

---------------------------------------------------------------------------
TypeError                                 Traceback (most recent call last)
<ipython-input-3-82784a93576b> in <module>()
 11 f.writerow(["id", "parent_id", "author", "created_utc","subreddit", "body", "score"])
 12 for x in page:
---> 13     f.writerow([x["data"]["id"],
     14                 x["data"]["parent_id"],
     15                 x["data"]["author"],

TypeError: byte indices must be integers or slices, not str

我在这里尝试了解决方案：How can I convert JSON to CSV?

这可能是也可能不是我遇到的实际问题。任何建议将不胜感激！

【问题讨论】：

看来x 或x["data"] 不是字典而是字符串。尝试打印出你的值进行调试，看看x 的实际结构是什么
你应该使用page_json，而不是page
您正在迭代 page 而不是 page_json 。
for x in page_json:....
抱歉，页面有错别字。当我运行正确的代码时，它给出了这个错误 TypeError: string indices must be integers

标签： python json api csv

【解决方案1】：

您有“数据”，其中包含 csv 行的条目数组，而不是每个都带有键“数据”的对象数组。所以你需要先访问“数据”：

page_json = json.loads(page.text)['data']

然后遍历它：

for x in page_json:
    f.writerow([x["id"],
                x["parent_id"],
                x["author"],
                x["created_utc"],
                x["subreddit"],
                x["body"],
                x["score"]])

请注意，您需要遍历 JSON 对象而不是请求。

你也可以重构代码来得到这个：

columns = ["id", "parent_id", "author", "created_utc", "subreddit", "body", "score"]
f.writerow(columns)
for x in page_json:
    f.writerow([x[column] for column in columns])

【讨论】：