如何在龙卷风python中创建异步RequestHandler

Question

目前我正在使用龙卷风在我的后端网络服务器上工作。

我现在遇到的问题：
- 当发出请求并且服务器正在处理请求时，所有其他请求都被阻止

我的RequestHandler：

class UpdateServicesRequestHandler( RequestHandler ):

    @gen.coroutine
    def get( self ):

        update = ServiceUpdate()
        response = yield update.update_all( )

        if self.request.headers.get('Origin'):
            self.set_header( 'Access-Control-Allow-Origin', self.request.headers.get('Origin') )
        self.set_header( 'Content-Type', 'application/json')
        self.write( response )

我的update_all() ：

@gen.coroutine
def update_all( self ):

    for service in self.port_list:
        response = yield self.update_service( str( service.get( 'port' ) ) )
        self.response_list.append( response )

    self.response = json.dumps( self.response_list )

    return self.response

我的update_sevice() ：

process = Popen( [ command ], stdout=PIPE, stderr=PIPE, shell=True )
output, error = process.communicate()

问题是，我需要update_all()方法的结果。 那么是否有可能使此请求不阻止我的整个服务器请求？

谢谢！

Answer 1

除了像dano建议的那样使用tornado.process.Subprocess之外，你应该使用stdout=tornado.process.Subprocess.STREAM而不是PIPE ，并且异步读取stdout / stderr。 使用PIPE将适用于少量输出，但如果您使用PIPE并且子进程尝试写入太多数据（过去为4KB但在大多数现代Linux系统中限制更高wait_for_exit() ，您将在wait_for_exit()死锁。

process = Subprocess([command], 
    stdout=Subprocess.STREAM, stderr=Subprocess.STREAM,
    shell=True)
out, err = yield [process.stdout.read_until_close(),
    process.stderr.read_until_close()]

Answer 2

您需要使用龙卷风周围的包装subprocess.Popen以避免阻塞事件循环：

from tornado.process import Subprocess
from subprocess import PIPE
from tornado import gen

@gen.coroutine
def run_command(command):
    process = Subprocess([command], stdout=PIPE, stderr=PIPE, shell=True)
    yield process.wait_for_exit()  # This waits without blocking the event loop.
    out, err = process.stdout.read(), process.stderr.read()
    # Do whatever you do with out and err