Django celery redis 从队列中删除特定的周期性任务

Question

有一个特定的周期性任务需要从消息队列中删除。 我这里使用的是Redis和celery的配置。

任务.py

@periodic_task(run_every=crontab(minute='*/6'))
def task_abcd():
    """
    some operations here
    """

项目中还有其他定期任务，但我需要停止此特定任务以从现在开始停止。

正如在这个答案中所解释的，下面的代码会起作用吗？

@periodic_task(run_every=crontab(minute='*/6'))
def task_abcd():
    pass

Answer 1

在这个例子中，周期性任务计划是直接在代码中定义的，这意味着它是硬编码的，不能在不更改代码和重新部署应用程序的情况下动态更改。

提供的带有删除任务逻辑或在开始时简单return代码 - 将起作用，但不会成为问题的答案 - 任务仍将运行，只是没有代码可以与它一起运行。

此外， 建议不要使用@periodic_task ：

"""不推荐使用的装饰器，请使用 :setting: beat_schedule 。"""

所以不推荐使用。

---

首先，将方法从@periodic_task更改为普通的 celery @task ，并且因为您使用的是 Django - 最好直接使用@shared_task ：

from celery import shared_task

@shared_task
def task_abcd():
    ...

现在这只是 celery 任务之一，需要显式调用。 或者，如果添加到 celery 节拍计划中，它可以定期运行。

对于生产，如果使用多个工作人员，不建议使用嵌入式节拍 (-B) 运行 celery worker - 运行单独的 celery beat 调度程序实例。

附表可以指定在celery.py或Django项目的设置（ settings.py ）。

它仍然不是很动态，因为重新读取设置应用程序需要重新加载。

然后，使用允许动态创建计划的数据库调度程序 - 需要运行哪些任务以及何时以及使用什么参数。 它甚至为管理提供了不错的 django 管理 web 视图！

Answer 2

该代码将起作用，但我会选择不强制您在每次需要禁用/启用任务时更新代码的方法。

您可以做的是使用一个可配置变量，其值可以来自管理面板、配置文件或您想要的任何内容，并在任务处于禁用模式时使用它在代码运行之前返回。

例如：

@periodic_task(run_every=crontab(minute='*/6'))
def task_abcd():
    config = load_config_for_task_abcd()

    if not config.is_enabled:
        return

    # some operations here

这样，即使你的任务被调度，它的操作也不会被执行。

Answer 3

如果您只是想删除周期性任务，您是否尝试删除该功能，然后重新启动 celery 服务。 为了安全起见，您可以重新启动 Redis 服务和 Django 服务器。

确保您删除的函数未在其他任何地方引用。