在 latin1 编码的文件中写入然后读取字符串

Question

这里有 2 个代码示例，Python3：第一个使用 latin1 编码写入两个文件：

s='On écrit ça dans un fichier.'
with open('spam1.txt', 'w',encoding='ISO-8859-1') as f:
    print(s, file=f)
with open('spam2.txt', 'w',encoding='ISO-8859-1') as f:
    f.write(s)

第二个读取相同编码的相同文件：

with open('spam1.txt', 'r',encoding='ISO-8859-1') as f:
    s1=f.read()
with open('spam2.txt', 'r',encoding='ISO-8859-1') as f:
    s2=f.read()

现在，打印 s1 和 s2 我得到了

On écrit ça dans un fichier.

而不是最初的“On écrit ça dans un fichier”。

怎么了？我也尝试过 io.open 但我错过了一些东西。有趣的是，我对 Python2.7 和它的 str.decode 方法没有这样的问题，现在已经消失了......

有人可以帮我吗？

Answer 1

您的数据以 UTF-8 格式写出：

>>> 'On écrit ça dans un fichier.'.encode('utf8').decode('latin1')
'On écrit ça dans un fichier.'

这意味着您没有写出 Latin-1 数据，或者您的源代码保存为 UTF-8，但您声明了您的脚本（使用 PEP 263-compliant header 改为 Latin-1。

如果您保存的 Python 脚本带有如下标题：

# -*- coding: latin-1 -*-

但是您的文本编辑器使用 UTF-8 编码保存了文件，然后是字符串文字：

s='On écrit ça dans un fichier.'

也会以同样的方式被 Python 误解。将生成的 unicode 值以 Latin-1 格式保存到磁盘，然后以 Latin-1 格式再次读取它会保留错误。

要调试，请仔细查看 first 脚本中的print(s.encode('unicode_escape'))。如果它看起来像：

b'On \\xc3\\xa9crit \\xc3\\xa7a dans un fichier.'

那么您的源代码编码和 PEP-263 标头在应如何解释源代码方面存在分歧。如果您的源代码被正确解码，则正确的输出是：

b'On \\xe9crit \\xe7a dans un fichier.'

如果 Spyder 顽固地忽略 PEP-263 标头并将您的源代码读取为 Latin-1 不管，请避免使用非 ASCII 字符并改用转义码；要么使用\uxxxx unicode 代码点：

s = 'On \u00e9crit \u007aa dans un fichier.'

或\xaa 256 以下代码点的一字节转义码：

s = 'On \xe9crit \x7aa dans un fichier.'