检查 JSON var 是否具有可为空的键（Twitter 流 API）答案

【问题标题】：Check if JSON var has nullable key (Twitter Streaming API)检查 JSON var 是否具有可为空的键（Twitter 流 API）
【发布时间】：2019-08-13 10:47:15
【问题描述】：

我正在使用 Tweepy 从 Twitter Streaming API 下载推文。我设法检查下载的数据是否具有“extended_tweet”这样的键，但我正在努力处理另一个键中的特定键。

def on_data(self, data):
    savingTweet = {}
        if not "retweeted_status" in data: 
            dataJson = json.loads(data)
            if 'extended_tweet' in dataJson:
                savingTweet['text'] = dataJson['extended_tweet']['full_text']
            else:
                savingTweet['text'] = dataJson['text']
            if 'coordinates' in dataJson:
                if 'coordinates' in dataJson['coordinates']:
                    savingTweet['coordinates'] = dataJson['coordinates']['coordinates']
            else:
                savingTweet['coordinates'] = 'null'

我正在正确地检查 'extended_key'，但是当我尝试对 ['coordinates]['coordinates] 执行相同操作时，我收到以下错误：

TypeError: argument of type 'NoneType' is not iterable

Twitter 文档称关键“坐标”具有以下结构：

"coordinates":
{
    "coordinates":
    [
        -75.14310264,
        40.05701649
    ],
    "type":"Point"
}

我通过尝试尝试冲突检查来解决它，但我认为这不是解决问题的最合适的方法。还有什么想法吗？

【问题讨论】：

标签： python json twitter key tweepy

【解决方案1】：

因此，Twitter API 文档可能对它们返回的内容有些撒谎（令人震惊！），看起来您正在使用 None 代替预期的数据结构。您已经决定不使用 try、catch，所以我不再赘述，但这里有一些其他建议。

使用 dict get() 默认

我想到了几个选项，第一个是利用 dict get 命令的默认功能。如果预期的键不存在，您可以提供回退，这允许您将多个调用链接在一起。

例如，您可以通过以下方式实现大部分您想要做的事情：

return {
    'text': data.get('extended_tweet', {}).get('full_text', data['text']),
    'coordinates': data.get('coordinates', {}).get('coordinates', 'null')
}

它不是超级漂亮，但它确实有效。它可能会比你正在做的事情慢一点。

使用 JSONPath

另一个选项，这可能是在这种情况下过度杀伤力是使用JSONPath 库，它将允许您在数据结构中搜索匹配查询的项目。比如：

from jsonpath_rw import parse

matches = parse('extended_tweet.full_text').find(data)
if matches:
    print(matches[0].value)

这会比你正在做的事情慢很多，而且对于几个领域来说是多余的，但如果你做很多这样的工作，它可能是一个方便的工具。 JSONPath 还可以表达更复杂的路径，或者非常深的嵌套路径，其中 get 方法可能不起作用，或者笨拙。

先解析 JSON！

我要提到的最后一件事是确保在对 "retweeted_status" 进行测试之前解析 JSON。如果文本出现在任何地方（比如在推文的文本中），就会触发这个测试。

使用有能力的库解析 JSON 通常也非常快，因此除非您遇到真正的速度问题，否则不必担心。

【讨论】：