如何根据scrapy中的日志条目来源有选择地设置log_level？

Question

是否可以将[scrapy.core.engine]和[scrapy.extensions.logstats]的日志级别设置为'INFO'以及我的自定义记录器，并将其他所有设置为'WARNING'？ 我想这样做是为了清除日志文件中的一些混乱情况。

提前致谢！

编辑：

我尝试按照此答案中的说明进行以下操作：

DEFAULT_LOGGING = {
    'version': 1,
    'disable_existing_loggers': False,
    'root': {'level': 'WARNING'},
    'loggers': {
        'twisted': {
            'level': 'ERROR',
        },
        'scrapy.core.engine': {
            'level': 'INFO',
        },
        'scrapy.extensions.logstats': {
            'level': 'INFO',
        },
    }
}

不幸的是，由于某种原因，这是行不通的。 默认的“警告”级别不会应用到所有记录器，并且上面的记录器指定的级别似乎无效...

Answer 1

显然，scrapy使用logging 。 您可以使用如下所示的内容：

import logging
for key in logging.Logger.manager.loggerDict:
    if "scrapy.core.engine" in key or "scrapy.extensions.logstat" in key:
        logging.getLogger(key).setLevel(logging.WARNING)
logging.basicConfig(level=logging.INFO)

我还没有对它进行草率的测试，但是我将它用于其他软件包。 希望它能工作。