Django Celery运行时更改日志文件

Question

========================最后更新======================== =
我发现芹菜信号worker_process_init.connect（some_function）
这可以让我在工作者子程序开始运行之前运行我想要的任何功能，就我而言，我可以根据需要更改日志处理程序...

handler = logging.FileHandler(('my%s.log')%current_process().index, 'a')
logger.addHandler(handler)

（我发现的另一个信号-setup_log在我的情况下效率不高。）
++++++++++++++++++++++++++更新+++++++++++++++++++++++ +++
我将handlet从我的settings.py中移出，因为我知道它仅加载一次，所以现在在task.py中对其进行了定义：

def custom_logger(name):
    logger = logging.getLogger(name)
    logger.setLevel(logging.DEBUG)
    handler = logging.FileHandler(('my%s.log')%current_process().index, 'a')
    logger.addHandler(handler)
return logger

和任务，例如：

@tenant_celery.task(base=HandlersImplTenantTask)
@concurrent_task(task_timeout=1)
def add():
    task_id = add.request.id
    l = custom_logger(task_id)
    l.info("task name is -   ADD")
    l.info("my worker id is: %s" % current_process().index)
return 5+7

不是最美观的解决方案，但它确实可以在运行时更改日志文件。

================================================== ============

我正在Django上运行Celery任务，

我希望每个芹菜工人都写入不同的日志文件，

但每次都同一个->

例如：worker 1-> myLog1.log，worker 2-> myLog2.log

这是我的settings.py的外观：

logfile = '%s/%s' % (logdir, APP_NAME + "-" + process_name + '.log')
CELERY_WORKER_LOGFILE = '%s/%s' % (logdir, 'celery_worker.log')

和task.py：

@tenant_celery.task(base=HandlersImplTenantTask)
def get_worker_id():
    logdir = '%s/%s' % (os.curdir, 'log')
    settings.CELERY_WORKER_LOGFILE = '%s/%s-%s.log' % (logdir, 'celery_worker', current_process().index)
    print settings.CELERY_WORKER_LOGFILE
    # print the new log file
    logger.info("HELLO FROM TASK %s", current_process().index)
    #  write to the wrong logfile.

与第二项任务相同。

但是，尽管它为每个任务打印了一个不同的“ LOFFILE”，

它会继续写入与其在settings.py中出现的日志相同的日志（!!）。

我的运行命令是：

celery worker -c 2 --broker=amqp://1000:1000@localhost:5672//1000

有什么方法可以（真正）在运行时更改日志文件？

（我不明白Django日志信号是否可以帮助我）

我也找到了这个答案，但对我不起作用。

谢谢

Answer 1

您知道，在运行worker时，可以通过如下参数指定日志文件：

celery -A proj worker -l info -f paht/to/yourfile.log

有关官方文档的更多信息