使用 Gunicorn 将 Celery 作为 Flask 应用程序运行

Question

我将 Celery 作为 Flask 微服务运行，其中包含带有任务的 tasks.py，而 manage.py 包含运行 Flask 服务器的调用。

这是 manage.py 的一部分

class CeleryWorker(Command):
    """Starts the celery worker."""
    name = 'celery'
    capture_all_args = True

    def run(self, argv):
        if "down" in argv:
            ret = subprocess.call(
                ['pkill', '-9', '-f', "my_app.celery"])
            sys.exit(ret)
        else:
            ret = subprocess.call(
                ['celery', 'worker', '-A', 'my_app.celery'] + argv)
            sys.exit(ret)


manager.add_command("celery", CeleryWorker())

我可以使用python manage.py runserver或 `celery worker -A my_app.celery 启动服务，它运行完美并在 tasks.py 中注册所有任务。

但在生产中，我想处理对这个微服务的多个请求，并想添加 gunicorn 来满足这些请求。 我该怎么做？

我无法弄清楚如何同时运行我的 gunicorn 命令和 celery 命令。

此外，我正在通过其 create_app 在生产中使用 gunicorn 运行其他 api 服务，因为我不需要它们来运行 celery 命令。

Answer 1

推荐使用Supervisor ，它允许您控制多个进程。

步骤1： pip install supervisor

第二步： vi supervisord.conf

[program:flask_wsgi]
command=gunicorn -w 3 --worker-class gevent wsgi:app 
directory=$SRC_PATH
autostart=true

[program:celery]
command=celery worker -A app.celery --loglevel=info
directory=$SRC_PATH
autostart=true

第三步：运行supervisord -c supervisord.conf