Python Unicode错误，“ ascii”编解码器无法编码字符

Question

我收到以下错误：

UnicodeEncodeError: 'ascii' codec can't encode character u'\xe1' in position 587: ordinal not in range(128)

我的代码：

import os
from bs4 import BeautifulSoup

do = dir_with_original_files = 'C:\Users\Me\Directory'
dm = dir_with_modified_files = 'C:\Users\Me\Directory\New'
for root, dirs, files in os.walk(do):
    for f in files:
        if f.endswith('~'): #you don't want to process backups
            continue
        original_file = os.path.join(root, f)
        mf = f.split('.')
        mf = ''.join(mf[:-1])+'_mod.'+mf[-1] # you can keep the same name 
                                             # if you omit the last two lines.
                                             # They are in separate directories
                                             # anyway. In that case, mf = f
        modified_file = os.path.join(dm, mf)
        with open(original_file, 'r') as orig_f, \
             open(modified_file, 'w') as modi_f:
            soup = BeautifulSoup(orig_f.read())
            for t in soup.find_all('td', class_='test'):
                t.string.wrap(soup.new_tag('h2'))
            # This is where you create your new modified file.
            modi_f.write(soup.prettify())

这段代码在目录上进行迭代，并且对于每个文件，查找类test的所有tds并将h2标记添加到td中的文本。 因此，以前是：

<td class="test"> text </td>

运行该程序后，将使用以下命令创建一个新文件：

<td class="test"> <h2>text</h2> </td>

或这就是我希望它起作用的方式。 不幸的是，目前，我遇到了上述错误。 我相信这是因为我正在解析一些包含重音符号的文本，这些文本用西班牙语写成特殊的西班牙字符。

我该怎么做才能解决我的问题？

Answer 1

soup.prettify()返回Unicode字符串 ，但是您的文件需要一个字节字符串 。 Python尝试在此处提供帮助并自动对结果进行编码，但是您的Unicode字符串包含的编码点超出了ASCII标准，因此编码失败。

您将必须手动编码为其他编解码器，或者使用其他文件对象类型来自动为您执行此操作。

在这种情况下，我将编码为BeautifulSoup为您检测到的原始编码 ：

modi_f.write(soup.prettify().encode(soup.original_encoding))

soup.original_encoding反映了BeautifulSoup解码未经修改的HTML的内容，并且基于（如果有的话）基于HTML本身声明的编码，或者基于对原始数据字节的统计分析得出的有根据的猜测。