将sys.stdout重定向到文件而不在Python 3中进行缓冲

Question

我有一个写入日志文件的脚本。 在Python 2中，我允许在日志前进时sys.stdout /查看日志的快速解决方案是将sys.stdout分配给缓冲设置为0的文件对象：

original_stdout = sys.stdout
sys.stdout = open(log_file, 'w', 0)

设置后，脚本功能中的所有打印语句都会很好地重定向到日志文件。

在Python 3下运行2to3转换版本会产生以下错误： ValueError: can't have unbuffered text I/O 将上面的'w'更改为'wb'可以解决此问题，因此该块的结构为

original_stdout = sys.stdout
sys.stdout = open(log_file, 'wb', 0)
print("{}".format(first_message))

但是现在第一个带有TypeError: 'str' does not support the buffer interface打印语句错误TypeError: 'str' does not support the buffer interface 。 我尝试将字符串显式转换为字节

print(bytes("{}".format(first_message), "UTF-8"))

但这会产生与以前相同的TypeError 。

在Python 3中将无缓冲文本写入文件的最简单方法是什么？

Answer 1

据当时的Python 3.4.3文档https://docs.python.org/3/library/io.html#raw-io和3.5 documenmtation在https://docs.python.org/3.5/library/io.html ＃raw-io获取未缓冲IO的方法是使用Raw IO，可以按以下方式启用：

f = open("myfile.jpg", "rb", buffering=0)

这意味着“ wb”应该可以写作。

原始IO的详细信息位于https://docs.python.org/3/library/io.html#io.RawIOBase和https://docs.python.org/3.5/library/io.html#io.RawIOBase看起来是一样的。

我进行了一些测试，发现Text IO的缓冲非常严格，可能多达数百行，即使在写入sys.stderr并将错误输出重定向到文件（至少在Windows 7上）时，也会发生这种情况。 我尝试了Raw IO，效果很好！ -打印的每一行立即以纯文本形式通过-f输出。 这是在Windows 7上使用Python 3.4.3并使用与GitHub工具捆绑在一起的tail的结果：

import time
import sys
f = open("myfile.txt", "ab", buffering=0)
c = 0
while True:
    f.write(bytes("count is " + str(c) + '\n','utf-8'))
    c += 1
    time.sleep(1)

Answer 2

如果通过无缓冲的方式意味着立即将输出刷新到磁盘，则可以执行以下操作：

original_stdout = sys.stdout
sys.stdout = open(log_file, 'w')
print(log_message, flush=True)

由于print现在是一流的功能，因此您还可以指定要打印到的file ，例如：

fd = open(log_file, 'w')
print(log_message, file=fd, flush=True)

Answer 3

问题似乎在于您打开文件的方式-

open(log_file, 'w', 0)

从Python 3.x文档 -

打开（文件，模式='r'， 缓冲= -1 ，编码=无，错误=无，换行=无，closefd =真，打开器=无）

open()的第三个参数确定文件的缓冲模式， 0表示没有缓冲。 我认为您不能仅使用'wb'而不是'w'来使其工作。

您应该删除该第三个参数0 ，并让open()对文本文件使用默认的行缓冲。 范例-

open(log_file, 'w')