UnicodeDecodeError：“charmap”编解码器无法解码位置 73776 中的字节 0x81

Question

这是一个 Django 项目。 在本地 virtualenv 中运行 pip install -r requirements.txt 时遇到错误。

Collecting https://github.com/jedestep/Zappa/archive/layer-support.zip (from -r requirements\base.txt (line 9))
Using cached https://github.com/jedestep/Zappa/archive/layer-support.zip
ERROR: Command errored out with exit status 1:
     command: 'c:\users\user~1\desktop\project\project\venv\scripts\python.exe' -c 'import sys, setuptools, tokenize
    ; sys.argv[0] = '"'"'C:\\Users\\USER~1\\AppData\\Local\\Temp\\pip-req-build-6htw2gh2\\setup.py'"'"'; __file__='"'"'C:\
    \Users\\USER~1\\AppData\\Local\\Temp\\pip-req-build-6htw2gh2\\setup.py'"'"';f=getattr(tokenize, '"'"'open'"'"', open)(
    __file__);code=f.read().replace('"'"'\r\n'"'"', '"'"'\n'"'"');f.close();exec(compile(code, __file__, '"'"'exec'"'"'))' e
    gg_info --egg-base 'C:\Users\USER~1\AppData\Local\Temp\pip-req-build-6htw2gh2\pip-egg-info'
         cwd: C:\Users\USER~1\AppData\Local\Temp\pip-req-build-6htw2gh2\
    Complete output (7 lines):
    Traceback (most recent call last):
      File "<string>", line 1, in <module>
      File "C:\Users\USER~1\AppData\Local\Temp\pip-req-build-6htw2gh2\setup.py", line 8, in <module>
        long_description = readme_file.read()
      File "c:\users\user~1\desktop\project\project\venv\lib\encodings\cp1252.py", line 23, in decode
        return codecs.charmap_decode(input,self.errors,decoding_table)[0]
    UnicodeDecodeError: 'charmap' codec can't decode byte 0x81 in position 73776: character maps to <undefined>
    ----------------------------------------
ERROR: Command errored out with exit status 1: python setup.py egg_info Check the logs for full command output.

要求确实在 vagrant 环境中按预期安装，但是我记得它也可以在我的机器上本地工作。不幸的是，我不确定导致此错误的更改是什么，它可能是拉动的结果。

版本： Python: 3.6.5 Django: 2.2 pip: 20.0.2

我已经运行了pip install --upgrade setuptools，但它并没有改变错误。 当我尝试运行tox 时，自动测试数据库下载会出现类似的错误。

任何想法将不胜感激。 谢谢。

Answer 1

要求确实在 vagrant 环境中按预期安装，但是我记得它也可以在我的机器上本地工作。不幸的是，我不确定导致此错误的更改是什么，它可能是拉动的结果。

问题在于您尝试安装的软件包以及您的环境配置。我猜这个包在某个时候更新并坏了，因为他们在自述文件中添加了表情符号或其他东西：如果你看一下错误消息，你会发现在将内容读入long_description 时出现问题，检查the package's setup.py，你可以在开始附近找到问题：

with open('README.md') as readme_file:
    long_description = readme_file.read()

这里的问题是，当你open 一个文件没有指定模式时，它将是“文本”，所以 python 会自动将字节解码为 str，这很酷，除了 encoding 它这种解码的用途是系统的“默认”（通过调用locale.getpreferredencoding(False) 找到），这通常不是我们想要的。

您的 Vagrant 环境和开发人员的机器可能具有 UTF8 默认编码（就像现在大多数 unix 系统一样），同时您的本地 windows 框没有并且默认使用 CP1252，这会爆炸。可悲的是，我不是 Windows 用户（对于开发人员），所以我不知道如何更改“默认编码”，考虑到粗略搜索 SO 所产生的结果，这甚至可能是不可能的。

我建议：

• 要求包作者修复他们的 setup.py 以在打开文件时明确指定 encoding
• 试图了解更多关于getpreferredencoding 的内部决策，以及是否可以通过Windows 中的环境覆盖preferredencoding（显然可以/很容易覆盖标准流的编码，但chcp / @ 987654322@ 显然不会为普通的open 做任何事情）
• 在适用于 Linux 的 Windows 子系统上运行您的东西，这可能开箱即用

PS：我冒昧地更新了您帖子的标签，因为 django、pip 和 Eggs 与实际问题无关