连接两个以asyncio.subprocess.create_subprocess_exec（）开头的进程

Question

当与老同学开始两个过程subprocess.Popen() API，我可以轻松连接标准出一个进程的标准在另一个进程中，创造了以同样的方式作为管道在UNIX外壳连接与命令时会做| ：

from subprocess import Popen, PIPE

process_1 = Popen(['ls'], stdout = PIPE)
process_2 = Popen(['wc'], stdin = process_1.stdout)

process_1.wait()
process_2.wait()

从asyncio.subprocess.create_subprocess_exec()使用异步API时，如何完成相同的工作？ 这是我尝试的：

from asyncio.events import get_event_loop
from asyncio.subprocess import PIPE, create_subprocess_exec

async def main():
    process_1 = await create_subprocess_exec('ls', stdout = PIPE)
    process_2 = await create_subprocess_exec('wc', stdin = process_1.stdout)

    await process_1.wait()
    await process_2.wait()

get_event_loop().run_until_complete(main())

但是对create_subprocess_exec()的第二次调用抱怨传递给stdin的参数没有fileno （这是真的）：

Traceback (most recent call last):
  File ".../test-async.py", line 11, in <module>
     get_event_loop().run_until_complete(main())
[...]
  File ".../test-async.py", line 6, in main
     process_2 = await create_subprocess_exec('wc', stdin = process_1.stdout)
[...]
  File "/opt/local/Library/Frameworks/Python.framework/Versions/3.5/lib/python3.5/subprocess.py", line 1388, in _get_handles
     p2cread = stdin.fileno()
AttributeError: 'StreamReader' object has no attribute 'fileno'

如何获得与上述同步示例相同的结果？

Answer 1

在asyncio中， process.stdout实际上是StreamReader ，而不是文件对象。 可以通过process._transport._proc.stdout访问文件对象。 不幸的是，您将无法使用它，因为它已经在事件循环中注册，以便提供流接口process.stdout 。

解决该问题的一种方法是创建自己的管道并将文件描述符传递给子进程：

async def main():
    read, write = os.pipe()
    process_1 = await create_subprocess_exec('ls', stdout=write)
    os.close(write)
    process_2 = await create_subprocess_exec('wc', stdin=read, stdout=PIPE)
    os.close(read)
    return await process_2.stdout.read()

请注意，一旦启动第一个子流程，就应显式关闭write文件描述符（除非您使用subprocess.PIPE否则它不会自动关闭）。 在read文件描述符也需要被关闭，如解释在这里 。