Android 上的 kivy/Python 上缺少 Unicode 编解码器？答案

【问题标题】：Missing Unicode codecs on kivy/Python on Android?Android 上的 kivy/Python 上缺少 Unicode 编解码器？
【发布时间】：2014-07-17 03:47:22
【问题描述】：

我有一个在 kivy 下运行的程序，它在 Windows 上运行良好，但在 Android 上打开文件失败（两个平台上的 1.8.0）。奇怪的是，当我明确要求 utf-8 时，错误消息表明它正在尝试解码 ASCII；该文件的任何地方都没有 0xFF 字符 - 我使用 od 实用程序进行了检查。

代码：

try:
    Logger.info('Mark: opening file ' + repr(filename))
    with codecs.open(filename, 'r', encoding='utf_8') as f:
        lines = [line.rstrip(u'\r\n').lstrip(codecs.BOM) for line in f]
except UnicodeDecodeError as e:
    Logger.info('Mark: utf8 load failed: ' + str(e))
    with codecs.open(filename, 'r', encoding='cp1252') as f:
        lines = [line.rstrip(u'\r\n') for line in f]

日志文件：

[INFO              ] Mark: opening file '/mnt/sdcard/My Files/Documents/DVDs.txt'
[INFO              ] Mark: utf8 load failed: 'ascii' codec can't decode byte 0xff in position 0: ordinal not in range(128)
[INFO              ] Base: Leaving application in progress...
[WARNING           ] stderr: Traceback (most recent call last):
[WARNING           ] stderr:   File "main.py", line 295, in <module>
[WARNING           ] stderr:     app.run()
[WARNING           ] stderr:   File "/home/tito/code/python-for-android/build/python-install/lib/python2.7/site-packages/kivy/app.py", line 792, in run
[WARNING           ] stderr:   File "/home/tito/code/python-for-android/build/python-install/lib/python2.7/site-packages/kivy/base.py", line 481, in runTouchApp
[WARNING           ] stderr:   File "/home/tito/code/python-for-android/build/python-install/lib/python2.7/site-packages/kivy/core/window/window_pygame.py", line 381, in mainloop
[WARNING           ] stderr:   File "/home/tito/code/python-for-android/build/python-install/lib/python2.7/site-packages/kivy/core/window/window_pygame.py", line 287, in _mainloop
[WARNING           ] stderr:   File "/home/tito/code/python-for-android/build/python-install/lib/python2.7/site-packages/kivy/base.py", line 321, in idle
[WARNING           ] stderr:   File "/home/tito/code/python-for-android/build/python-install/lib/python2.7/site-packages/kivy/clock.py", line 422, in tick
[WARNING           ] stderr:   File "/home/tito/code/python-for-android/build/python-install/lib/python2.7/site-packages/kivy/clock.py", line 537, in _process_events
[WARNING           ] stderr:   File "/home/tito/code/python-for-android/build/python-install/lib/python2.7/site-packages/kivy/clock.py", line 309, in tick
[WARNING           ] stderr:   File "main.py", line 266, in select_file_part2
[WARNING           ] stderr:     with codecs.open(filename, 'r', encoding='cp1252') as f:
[WARNING           ] stderr:   File "/home/tito/code/python-for-android/build/python-install/lib/python2.7/codecs.py", line 884, in open
[WARNING           ] stderr: LookupError: unknown encoding: cp1252

编辑：我输入了一些调试代码通过entire list，发现除了ascii、latin_1和各种utf编解码器之外，所有的都丢失了。 p>

【问题讨论】：

仅供参考，用于自动 BOM 处理使用utf-8-sig。
@MarkTolonen 你已经成功地找出了我为什么会出现解码错误，非常感谢。但这仍然不能解释为什么缺少cp1252。我想我有两个不同的错误。
可能 Android 上没有提供编码。 Python 的Lib\encodings\cp1252.py 存在吗？
@MarkTolonen 我还没有找到 Python 的安装目录。

标签： android python unicode kivy

【解决方案1】：

摆脱 try/except 并查看真正的异常。 codecs.BOM 是一个字节字符串 \xff\xfe，它被使用默认的 ascii 编解码器强制转换为 Unicode：

>>> import codecs
>>> codecs.BOM
'\xff\xfe'
>>> u'test'.lstrip(codecs.BOM)
Traceback (most recent call last):
  File "<stdin>", line 1, in <module>
UnicodeDecodeError: 'ascii' codec can't decode byte 0xff in position 0: ordinal not in range(128)

【讨论】：