pyodbc 无法正确处理 unicode 数据

Question

我确实成功地将 MySQL 数据库与 pyodbc 连接起来，它与 ascii 编码的数据配合得很好，但是当我打印用 unicode(utf8) 编码的数据时，它引发了错误：

UnicodeEncodeError: 'ascii' codec can't encode characters in position 0-8: ordinal not in range(128)

所以我检查了行中的字符串：

>>>row[3]
'\xe7\xae\xa1\xe7\x90\u2020\xe5\u2018\u02dc'

我找到instructions about unicode in pyodbc github wiki

这些数据库倾向于使用单一编码并且不区分 在“SQL_CHAR”和“SQL_WCHAR”之间。因此，您必须配置它们 将 Unicode 数据编码为 UTF-8 并对两种 C 缓冲区类型进行解码 使用 UTF-8。

# Python 3.x
cnxn.setdecoding(pyodbc.SQL_CHAR, encoding='utf-8')
cnxn.setdecoding(pyodbc.SQL_WCHAR, encoding='utf-8')
cnxn.setencoding(encoding='utf-8')

如果您使用的是 MySQL，您可以将字符集添加到 连接字符串，但我不确定这是否有必要。

# MySQL
cstring = 'DSN=mydsn;CharSet=utf8'
cnxn = pyodbc.connect(cstring)

我按照上面的方法做了，但没有什么不同。 流动是我的代码

#!/usr/bin/env python3
# -*- coding: utf-8 -*-
import pyodbc
import configparser
class ServerDBDAO():
    def __init__(self):
        ''' Establish connection to SQL'''
        # Read config
        self.cf = configparser.ConfigParser()
        self.cf.read("./Config/server.ini")
        driver = self.cf.get('Database', 'Driver')
        server = self.cf.get('Database', 'Server')
        database = self.cf.get('Database', 'Database')
        uid = self.cf.get('Database', 'UID')
        pwd = self.cf.get('Database', 'PWD')

        # Connect database
        connString = 'DRIVER=%s;SERVER=%s;DATABASE=%s;UID=%s;PWD=%s;CharSet=utf8'%(driver, server, database, uid, pwd)
        '''Successfully connected database with this
        self.conn = pyodbc.connect('DRIVER=/usr/lib/x86_64-linux-gnu/odbc/libmyodbc.so;SERVER=localhost;DATABASE=xxx;UID=root;PWD=xxxxxx'))
        '''
        self.conn = pyodbc.connect(connString,unicode_results=True)
        self.conn.setdecoding(pyodbc.SQL_CHAR, encoding='utf-8')
        self.conn.setdecoding(pyodbc.SQL_WCHAR, encoding='utf-8')
        self.conn.setencoding(encoding='utf-8')
        self.cursor = self.conn.cursor()

    def __del__(self):
        self.conn.commit()
        self.conn.close()

测试代码：

from ServerDBDAO import ServerDBDAO
dbdao = ServerDBDAO()
row_employee = cursor.execute('select id, name, email from Employee;').fetchone()
print(row_employee.name)

Answer 1

我遇到了同样的问题。除了使用这些：

cnxn.setdecoding(pyodbc.SQL_CHAR, encoding='utf-8')
cnxn.setdecoding(pyodbc.SQL_WCHAR, encoding='utf-8')
cnxn.setencoding(encoding='utf-8')

添加这个解决了我的问题：

cnxn.setdecoding(pyodbc.SQL_WMETADATA, encoding='utf-32le')