用户定义的 celery 任务类：在导入期间调用 init

Question

我正在尝试将 celery 任务用作一个类并查看以下行为。 我想我错过了什么。 让我先告诉你我想要达到的目标：
1. 创建一个类，它的 init 函数只会被 celery 调用一次。 这将为我的班级设置所需的参数。 我要在这里创建一个线程池。
2. 在生产者中创建此 celery 任务对象的实例并将作业放入其中。

为了达到同样的目的，我尝试了 celery 站点上提到的天真示例并创建了一个示例类。 我正在使用以下方法创建任务：

celery -c 1 -A proj worker --loglevel=debug

它起初似乎在工作，但后来我观察到在 tester.py 中的导入时调用了任务的 init，我可以通过传递标志来停止对象使用中的这个 init，但导入期间的 init 在这里是一个真正的问题。

你能指点我正确使用这个例子吗？ 我不希望任务类的 init 被调用的次数多于我使用 celery 命令调用的次数。 在现实生活中，它会创建不必要的线程。

另外，如果可能的话，请指出一个最接近我上面提到的要求的例子。

芹菜.py

from __future__ import absolute_import
from celery import Celery
app = Celery('proj',
         broker='amqp://',
         backend='amqp://',
         include=['proj.tasks'])

# Optional configuration, see the application user guide.
app.conf.update(
    CELERY_TASK_RESULT_EXPIRES=3600,
)

if __name__ == '__main__':
    app.start()

任务.py

from __future__ import absolute_import
from proj.celery import app

class NaiveAuthenticateServer(app.Task):

def __init__(self, celeryInst = 1):
    if celeryInst == 1:
        print "Hi, I am celery instant"
    else :
        print "Did you invoke me from command"
    self.users = {'george': 'password'}

def run(self, username, password):
    try:
        return self.users[username] == password
    except KeyError:
        return False

测试器.py

from proj import tasks
obj = tasks.NaiveAuthenticateServer(0)
res = obj.delay('hi', 'hello')
print res.get()

tester.py 的 o/p

嗨，我是芹菜速溶
你有没有从命令中调用我
错误的

Answer 1

您不应自己创建任务类的实例，而应让 celery 在进程启动时自动为您创建。

因此，您需要定义一个使用基类的任务函数：

@app.task(base=NaiveAuthenticateServer)
def my_task(arg1, arg2):
    print arg1, arg2

然后像这样提交任务：

from proj import tasks
tasks.my_task.delay('hi', 'hello')