Python中子进程的实时输出

Question

我正在运行Django网络服务器，并尝试将子进程的输出实时打印到日志中。 如果我推荐readline行并取消注释yowzer行，我将获得所需的日志输出流，但是当我尝试按原样运行此命令时，我没有任何输出。 我究竟做错了什么？ 我可以找到的所有结果似乎都表明它可以按原样工作。

sp = subprocess.Popen(command, shell=True, stdout=subprocess.PIPE)

while sp.poll() is None:
    logging.critical(sp.stdout.readline())
    #logging.critical('yowzer')
    time.sleep(10)

谢谢！

[edit 4月3日]事实不是问题，该命令不是长时间运行，而是我使用分号将main命令与“ su user”命令连接在一起。 删除su解决了该问题。

Answer 1

在Python中调用子流程时，获取（或者说不获取）实时输出是一个长期的烦恼。 请参阅此问题进行更深入的讨论，但简短的版本是将关键字arg bufsize=1到Popen调用中可能是您​​需要的秘诀。

另外，为什么要有time.sleep(10) ？ 您确实意识到这意味着您必须在每行记录之间等待10秒，对吗？ 尝试重组正在读取输出的调用。 假设您使用的是Python 3，请尝试以下操作：

from subprocess import PIPE, Popen

with Popen(command, shell=True, stdout=PIPE, bufsize=1) as sp:
    for line in sp.stdout:
        logging.critical(line)

我刚刚测试了上面的代码，可以确认它是否有效。 在这里自己尝试一下 。 链接的测试版本会在日志的每一行之前打印一个时间戳。

如果仍然无法正常工作

如果您要调用的子进程没有定期刷新其输出，则在Python脚本中您无能为力。 您提到了Django，对吗？ 您尝试记录的输出是否通过标准Python print()调用生成？ 如果是这样，您可以修改它们以更积极地刷新：

print(s, flush=True)

我使用过的每种其他 语言也都具有等效的flush命令，因此（假设您有权访问/可以修改子流程的源），您应该能够完成这项工作。