![](/img/trans.png)
[英]Can't set airflow's celery_result_backend setting to 'rpc://'
[英]Setting up a result backend (rpc) with Celery in Django
我试图得到一个结果后端在我的本地机器上工作我正在进行的项目,但我遇到了一个问题。
目前我正在尝试创建一个队列系统,以便我的实验室创建案例。 这是为了防止使用重复的序列号。 我已经在使用Celery进行打印,所以我想我会创建一个新的Celery队列并使用它来处理这个案例。 前端还需要获取案例创建的结果以显示创建的案例编号。
http://docs.celeryproject.org/en/latest/getting-started/first-steps-with-celery.html#rabbitmq
我正在按照上面的教程来配置我的Celery。 以下是来源:
celeryconfig.py:
from kombu import Queue
CELERY_DEFAULT_QUEUE = 'celery'
CELERY_DEFAULT_EXCHANGE = 'celery'
CELERY_DEFAULT_EXCHANGE_TYPE = 'direct'
CELERY_RESULT_BACKEND = 'rpc://'
CELERY_RESULT_PERSISTENT = False
CELERY_QUEUES = (
Queue('celery', routing_key="celery"),
Queue('case_creation', routing_key='create.#')
)
CELERY_ROUTES = {
'case.tasks.create_case': {
'queue': 'case_creation',
'routing_key': 'create.1'
},
'print.tasks.connect_and_serve': {
'queue': 'celery',
'routing_key': 'celery'
}
}
celery.py:
import os
from celery import Celery
from django.conf import settings
os.environ.setdefault('DJANGO_SETTINGS_MODULE', 'proj.settings.local')
app = Celery('proj', broker='amqp://guest@localhost//')
app.config_from_object('proj.celeryconfig')
app.autodiscover_tasks(lambda: settings.INSTALLED_APPS)
tasks.py:
import celery
from django.db import IntegrityError
from case.case_create import CaseCreate
@celery.task(bind=True)
def create_case(self, data, user, ip):
try:
acc = CaseCreate(data, user, ip)
return acc.begin()
except IntegrityError as e:
self.retry(exc=e, countdown=2)
以下是调用上述任务的视图:
@require_authentication()
@requires_api_signature()
@csrf_exempt
@require_http_methods(['POST'])
def api_create_case(request):
result = create_case.delay(json.loads(request.body.decode('utf-8')), request.user, get_ip_address(request))
print(str(result)) # Prints the Task ID
print(str(result.get(timeout=1))) # Throws error
return HttpResponse(json.dumps({'result': str(result)}), status=200)
我用以下命令启动我的芹菜队列:
celery -A proj worker -Q case_creation -n case_worker -c 1
当我运行芹菜工作者时,我确实看到结果显示在config下:
-------------- celery@case_worker v3.1.16 (Cipater)
---- **** -----
--- * *** * -- Windows-8-6.2.9200
-- * - **** ---
- ** ---------- [config]
- ** ---------- .> app: proj:0x32a2990
- ** ---------- .> transport: amqp://guest:**@localhost:5672//
- ** ---------- .> results: rpc://
- *** --- * --- .> concurrency: 1 (prefork)
-- ******* ----
--- ***** ----- [queues]
-------------- .> case_creation exchange=celery(direct) key=create.#
当我运行程序并提交一个新案例时,这是我收到的错误消息:
No result backend configured. Please see the documentation for more information.
我尝试过每一件我能在网上找到的东西。 有没有人可以指出我正确的方向? 我非常亲密,非常厌倦了看这段代码。
如果您想保留结果,请尝试此保持结果
app = Celery('proj', backend='amqp', broker='amqp://guest@localhost//')
确保客户端配置了正确的后端。
如果由于某种原因客户端配置为使用与工作者不同的后端,则无法接收结果,因此请通过检查确保后端是正确的:
试试看看输出:
>>> result = task.delay(…)
>>> print(result.backend)
其他解决方案将取而代之
app = Celery('proj',
backend='amqp',
broker='amqp://',
include=['proj.tasks'])
尝试:
app = Celery('proj',
broker='amqp://',
include=['proj.tasks'])
app.conf.update(
CELERY_RESULT_BACKEND='amqp'
)
声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.