Bash重定向编码错误

Question

我将用Python编写的服务器的stdio重定向到一个文件：

python server.py &> file

输入通过使用XMLRPC库的client.py传输。 如果传输UTF-8输入，则在执行任何操作之前会收到UnicodeEncodeError。

这里的好奇心是：如果我不重定向server.py的stdoutput，则不会收到错误。

语言环境设置为en_US.utf8，bash正确显示unicode，客户端对文本进行编码。 我完全不知道发生了什么。

Answer 1

Python代码无关紧要，我不会修改SimpleXMLRPCServer模块。 它与Bash有关：

通过重定向创建的文件是us-ascii，并且只有在插入Unicode字符后才变为utf-8，在这种情况下将不起作用，因为该文件首先由XMLRPC模块处理，因此会发生UnicodeDecodeError。

我尝试先创建用于重定向的文件，但是即使文件中没有Unicode序列，即使使用iconv -f us-ascii -t utf-8，该文件也保持为us-ascii。

这个想法是创建一个基本的“安静模式”而不修改不起作用的Python代码，因此我创建了一个OptionParser，它将stdout映射到codecs.open（“ silent.log”，“ w”，encoding =“ utf- 8“）。 这很好。