启动celery worker服务器时无法诊断MISCONF redis问题

Question

我使用带有redis的celery worker服务器作为代理URL（用于接收任务）以及结果后端。

BROKER_URL = 'redis://localhost:6379/2' CELERY_RESULT_BACKEND = 'redis://localhost:6379/2' app = Celery('myceleryapp', broker=BROKER_URL,backend=CELERY_RESULT_BACKEND)

我使用celery -A myceleryapp worker -l info -c 8启动celery worker服务器celery -A myceleryapp worker -l info -c 8

工作进程从Redis队列开始处理我的任务，直到某个时刻，我收到臭名昭著的MISCONF redis错误，芹菜工作进程终止。

Unrecoverable error: ResponseError('MISCONF Redis is configured to save RDB snapshots, but is currently not able to persist on disk. Commands that may modify the data set are disabled. Please check Redis logs for details about the error.',)

我检查了/var/log/redis的redis日志文件，该文件的末尾具有以下内容

24745:C 19 Aug 09:20:26.169 * RDB: 0 MB of memory used by copy-on-write
1590:M 19 Aug 09:20:26.247 * Background saving terminated with success
1590:M 19 Aug 09:25:27.080 * 10 changes in 300 seconds. Saving...
1590:M 19 Aug 09:25:27.081 * Background saving started by pid 25397
25397:C 19 Aug 09:25:27.082 # Write error saving DB on disk: No space left on device
1590:M 19 Aug 09:25:27.181 # Backgroun1590:M 19 Aug 09:51:03.042 * 1 changes in 900 seconds. Saving...
1590:M 19 Aug 09:51:03.042 * Background saving started by pid 26341
26341:C 19 Aug 09:51:03.405 * DB saved on disk
26341:C 19 Aug 09:51:03.405 * RDB: 22 MB of memory used by copy-on-write
1590:M 19 Aug 09:51:03.487 * Background saving terminated with success  

dump.rdb文件正在写入/var/lib/redis/dump.rdb 。 由于日志报告No space left on device ，因此我检查了安装/var的磁盘空间，并且似乎还有足够的空间（ 1.2GB ）。

如果有足够的磁盘空间，如何找到此错误的根本原因？ 当然，为了防止发生此错误，我可以在redis-cli中将config set stop-writes-on-bgsave-error no 。 但我想找出此错误的根本原因。 任何帮助或指示吗？

Answer 1

也许这是由交换文件引起的。 因为交换文件占用了磁盘的1.2Gb空间。 因此，redis抱怨没有写空间。

尝试使用此“ swapon -s”命令进行检查。

我认为如果此磁盘接受RAM页面交换，则1.2Gb不够。 您应该在更大的目录中更改RDB的目录。