json.dump - UnicodeDecodeError: 'utf8' codec can't decode byte 0xbf in position 0: invalid start byte

Question

我有一本字典 data 我已经存储了：

• key - 事件 ID

• value - 此事件的名称，其中 value 是一个 UTF-8 字符串

现在，我想把这张地图写成一个 json 文件。我试过这个：

with open('events_map.json', 'w') as out_file:
    json.dump(data, out_file, indent = 4)

但这给了我错误：

UnicodeDecodeError：“utf8”编解码器无法解码位置 0 中的字节 0xbf： 无效的起始字节

现在，我也尝试了：

with io.open('events_map.json', 'w', encoding='utf-8') as out_file:
   out_file.write(unicode(json.dumps(data, encoding="utf-8")))

但这会引发同样的错误：

UnicodeDecodeError：“utf8”编解码器无法解码位置 0 中的字节 0xbf： 无效的起始字节

我也试过了：

with io.open('events_map.json', 'w', encoding='utf-8') as out_file:
    out_file.write(unicode(json.dumps(data, encoding="utf-8", ensure_ascii=False)))

但这会引发错误：

UnicodeDecodeError：“ascii”编解码器无法解码位置 3114 中的字节 0xbf：序数不在范围内 (128)

关于如何解决这个问题的任何建议？

编辑： 我相信这是导致我问题的原因：

> data['142']
'\xbf/ANCT25'

编辑 2： data 变量是从文件中读取的。因此，从文件中读取后：

data_file_lines = io.open(file_name, 'r', encoding='utf8').readlines()

然后我会这样做：

with io.open('data/events_map.json', 'w', encoding='utf8') as json_file:
        json.dump(data, json_file, ensure_ascii=False)

这给了我错误：

TypeError: 必须是 unicode，而不是 str

然后，我尝试使用数据字典执行此操作：

for tuple in sorted_tuples (the `data` variable is initialized by a tuple):
    data[str(tuple[1])] = json.dumps(tuple[0], ensure_ascii=False, encoding='utf8')

这又是：

with io.open('data/events_map.json', 'w', encoding='utf8') as json_file:
    json.dump(data, json_file, ensure_ascii=False)

但同样的错误：

TypeError: must be unicode, not str

当我使用简单的open 函数从文件中读取时，我得到了同样的错误：

data_file_lines = open(file_name, "r").readlines()

Answer 1

异常是由您的data 字典的内容引起的，至少一个键或值是不是 UTF-8 编码的。

你必须替换这个值；通过替换一个 UTF-8 编码的值，或者通过使用任何编码对该值的正确编码仅解码该值将其解码为 unicode 对象：

data['142'] = data['142'].decode('latin-1')

将该字符串解码为 Latin-1 编码的值。