熊猫推特 json 奇怪的字符 u'�'

Question

不知道为什么，但是当我将 json 文件中的推文加载到 pandas 时，我得到了很多奇怪的字符。

 for file_name in files:
        if '.json' in file_name:
            file_path = WORKING_DIR + '/data/' + file_name

            # Reading the json as a dict
            with open(file_path) as json_d:
                data = json.load(json_d, encoding='utf8')
                json_df = pd.DataFrame.from_dict(data)
                dfs.append(json_df)

Answer 1

尝试使用encoding='utf-16' 或encoding='utf-8'

对于文件中的文件名： 如果文件名中有“.json”： 文件路径 = WORKING_DIR + '/data/' + 文件名

        # Reading the json as a dict
        with open(file_path) as json_d:
            data = json.load(json_d, encoding='utf-16')
            json_df = pd.DataFrame.from_dict(data)
            dfs.append(json_df)

正如@MYGz 建议的“u'�' 意味着它无法用 'utf-8' 解码字符” 所以尝试使用其他编码。