Python：UnicodeDecodeError：'ascii'编解码器无法解码位置0的字节0xd0：序数不在范围内（128）

Question

场景：我有一个JSON文件中的服务器名称列表，该文件正被脚本读取并放入字典中。 然后，我试图在将成为SQL查询的服务器中使用这些服务器名称。 但是，我在使用UTF-8编码的字符串时遇到了麻烦。

错误回溯：

Traceback (most recent call last):
  File "run.py", line 18, in <module>
    print(str(len(download.downloadRealmFiles('eu'))) + " EU files downloaded.")
  File "/var/www/etherealpost.com/scripts/ahdata/download.py", line 73, in downloadRealmFiles
    sql = u"UPDATE realms_lastmodified SET last_modified = '%d', latest_hash = '%s' WHERE region = '%s' AND realm = '%s'" % (lastModified, lastHash.encode('utf-8'), region.encode('utf-8'), realm)
UnicodeDecodeError: 'ascii' codec can't decode byte 0xd0 in position 0: ordinal not in range(128)

编码：

realm = data['files'][0]['realm']
lastHash = realmFile.split('/')[-2]
lastModified = data['files'][0]['lastModified']
dataURLs.append(realmFile)
sql = u"UPDATE realms_lastmodified SET last_modified = '%d', latest_hash = '%s' WHERE region = '%s' AND realm = '%s'" % (lastModified, lastHash.encode('utf-8'), region.encode('utf-8'), realm.encode('utf-8'))

lastModified的类型为long变量realm是包含Unicode字符的领域。

我不知道为什么这不起作用。

Answer 1

不要将字符串插入SQL查询中！ 改用SQL参数，并将其留给数据库处理引号和Unicode值：

sql = """\
    UPDATE realms_lastmodified
    SET last_modified=?, latest_hash=?
    WHERE region=? AND realm=?
"""
cursor.execute(sql, (lastModified, lastHash, region, realm))

我用过? 作为此处的参数占位符，但这取决于所使用的确切数据库库； 您可能需要改用%s作为占位符（ 无论列的类型是什么 ！）。

具体来说，您的错误是由您将编码后的字节串插入Unicode值引起的。 也不要那样做。 插值， 然后编码。 否则，Python会尝试使用默认编解码器解码UTF8字节以再次获取Unicode，这在这里失败。