[英]Python 2.7 - Pandas UnicodeEncodeError with data from pyodbc
我正在尝试使用 pyodbc 从 SQL Server 中提取数据并将其加载到数据帧中,然后将其导出到 HTML 文件,但我一直收到以下 Unicode 错误:
UnicodeEncodeError: 'ascii' codec can't encode character u'\u2019' in position 15500: ordinal not in range(128)
这是我当前的设置(每个文档的编码说明):
cnxn = pyodbc.connect('DSN=Planning;UID=USER;PWD=PASSWORD;')
cnxn.setdecoding(pyodbc.SQL_CHAR, encoding='cp1252', to=unicode)
cnxn.setdecoding(pyodbc.SQL_WCHAR, encoding='cp1252', to=unicode)
cnxn.setdecoding(pyodbc.SQL_WMETADATA, encoding='cp1252', to=unicode)
cnxn.setencoding(str, encoding='utf-8')
cnxn.setencoding(unicode, encoding='utf-8')
cursor = cnxn.cursor()
with open('Initial Dataset.sql') as f:
initial_query = f.read()
cursor.execute(initial_query)
columns = [column[0] for column in cursor.description]
initial_data = cursor.fetchall()
i_df = pd.DataFrame.from_records(initial_data, columns=columns)
i_df.to_html('initial.html')
一个奇怪但有用的注意点是,当我尝试导出 CSV 时:
i_df.to_csv('initial.csv')
我得到同样的错误,但是当我添加:
i_df.to_csv('initial.csv', encoding='utf-8')
有用。 有人可以帮我理解这个编码问题吗?
附注:我使用也尝试sqlalchemy
连接和pandas.read_sql()
和相同的错误仍然存在。
声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.