Django Logging旋轉文件不起作用

Question

所以當我達到maxBytes大小時，我遇到了Django日志記錄的一些問題。 基本上當發生這種情況時，文件似乎不會旋轉並創建新文件。

有人告訴我，這可能與服務器的寫入權限有關，但我不知道如何正確設置，以便django能夠在舊的日志文件已滿時創建新的日志文件。

我的設置：

LOGGING = {
    'version': 1,
    'disable_existing_loggers': False,
    'filters': {
        'require_debug_false': {
            '()': 'django.utils.log.RequireDebugFalse'
        }
    },
    'formatters': {
        'verbose': {
            'format': "[%(asctime)s] %(levelname)s [%(name)s:%(lineno)s] %(message)s",
            'datefmt': "%d/%b/%Y %H:%M:%S"
        },
        'simple': {
            'format': '[%(levelname)-7s] %(asctime)s - %(message)s'
        },
    },
    'handlers': {
        'mail_admins': {
            'level': 'ERROR',
            'filters': ['require_debug_false'],
            'class': 'django.utils.log.AdminEmailHandler'
        },
        'console': {
            'level': 'INFO',
            'class': 'logging.StreamHandler'
        },
        'boom_file': {
            'level': 'DEBUG',
            'class': 'logging.handlers.RotatingFileHandler',
            'maxBytes': 1024*1024*10,  # 10 MB
            'backupCount': 10,
            'filename': '/var/log/boom.log',
            'formatter': 'simple'
        },
        'binglaw_crawler_file': {
            'level': 'DEBUG',
            'class': 'logging.handlers.RotatingFileHandler',
            'maxBytes': 1024*1024*10,  # 10 MB
            'backupCount': 10,
            'filename': '/var/log/boom-binglaw-crawler.log',
            'formatter': 'simple'
        },
    },
    'loggers': {
        'django.request': {
            'handlers': ['mail_admins'],
            'level': 'ERROR',
            'propagate': True,
        },
        'boom': {
            'handlers': ['console', 'boom_file'],
            'propagate': True,
            'level': 'DEBUG',
        },
        'boom.binglaw_crawler': {
            'handlers': ['binglaw_crawler_file', ],
            'propagate': False,
            'level': 'DEBUG',
        },
    }
}

我注意到我的其他日志芹菜似乎正在旋轉就好了......不是很奇怪嗎？

-rw-r--rw- 1 root          root          10485721 Aug 18 12:12 boom-binglaw-crawler.log
-rw-r--r-- 1 root          root            403506 Nov  8 23:42 boom-celeryd.log
-rw-r--r-- 1 root          root             20201 Oct  2 12:47 boom-celeryd.log.1
-rw-r--rw- 1 root          root           1049478 Oct  1 18:49 boom-celeryd.log.2

更新：

當我嘗試運行創建日志文件的manage命令時，我收到此錯誤

Traceback (most recent call last):
  File "/usr/lib/python2.7/logging/handlers.py", line 77, in emit
    self.doRollover()
  File "/usr/lib/python2.7/logging/handlers.py", line 142, in doRollover
    os.rename(self.baseFilename, dfn)
OSError: [Errno 13] Permission denied

Answer 1

在Django日志記錄中使用'logging.handlers.RotatingFileHandler'時，我遇到了這個錯誤：

Traceback (most recent call last):
  File "C:\Python33\lib\logging\handlers.py", line 73, in emit
    self.doRollover()
  File "C:\Python33\lib\logging\handlers.py", line 176, in doRollover
    self.rotate(self.baseFilename, dfn)
  File "C:\Python33\lib\logging\handlers.py", line 116, in rotate
    os.rename(source, dest)
PermissionError: [WinError 32] The process cannot access the file because it is being used by another process: 'log.txt.1'

這個錯誤發生在我身上，因為當我啟動Django時，它似乎啟動了兩個不同的進程。 這兩個進程都設置了日志記錄，這意味着它們都可以獲得“settings.py”配置文件中定義的相同LOGGING文件的句柄。

在我設置LOGGING變量之前，我將此行添加到我的settings.py文件中。

print("Initializing LOGGING in settings.py - if you see this more than once use 'runserver --noreload'")

如果您使用'manage.py runserver --noreload '參數啟動應用程序，它可能會解決您的文件爭用問題。

Answer 2

目前適用於我的一個解決方案是使用'delay': True對於寫入文件的處理程序ID為'delay': True （在我的情況下為RotatingFileHandler ）。 這只在從記錄器調用第一個emit()時才創建文件，我的理解是主線程和自動重載線程之間的線程爭用（這是錯誤的原因）似乎在那時不存在。

Answer 3

使用TimedRotatingFileHandler和本地開發服務器時遇到了同樣的問題。

我的解決方案沒有提供--noreload標志

if os.environ.get('RUN_MAIN') == "true":
    logging.config.dictConfig(LOGGING)
    logger = logging.getLogger(__name__)
else:
    logger = logging.getLogger('root')

它不是100％干凈，因為第二個進程得到一個不同的記錄器，但對我來說，我想要啟用自動重新加載功能。