簡體 English 中英

如何確保Celery任務是防止Celery任務執行重疊

[英]How to ensure a Celery task is Preventing overlapping Celery task executions

原文 2012-03-28 21:28:39 8 2 python/ django/ celery/ django-celery

如何阻止Celery在上一次執行完成之前執行定期任務？

我有一個服務器集群，鏈接到一個公共數據庫服務器，執行Celery任務，我發現每個服務器可能偶爾同時運行相同的任務以及同時運行同一任務的不同服務器。 這導致了許多競爭條件，這些條件以痛苦的微妙方式破壞了我的數據。

我一直在閱讀Celery的文檔，但我找不到任何明確允許這個的選項。 我發現了一個類似的問題，但建議的修復似乎是一個黑客，因為它依賴於Django的緩存框架，因此可能不會被集群中的所有服務器共享，允許多個服務器仍然同時執行相同的任務。

Celery中是否有任何選項可以記錄數據庫中當前正在運行的任務，並且在清除數據庫記錄之前不再運行？

我正在使用Django-Celery模塊，即使它提供了pages / admin / djcelery / taskstate /和/ admin / djcelery / workerstate /，我也從未見過任何長期運行的任務或工作人員出現在那里。

標准方法是通過django標准緩存機制使用共享鎖。 從官方文檔中查看此配方

如果我是你，我會為任何無法同時執行的作業設置一個特殊隊列。 然后，您只需為該隊列啟動一個單獨的工作程序。

[英]Collect results from parallel Celery task executions

[英]celery and how to send task

[英]How to ensure Django model saves before Celery task execution?

[英]How can I ensure a Celery task runs with the right settings?

[英]How to invoke celery task using celery daemon

[英]Celery task within a task

[英]How to measure Celery task duration

[英]How to pause or resume celery task?

[英]How to determine the name of a task in celery?

[英]How to run a task periodically in celery?

暫無

聲明:本站的技術帖子網頁，遵循CC BY-SA 4.0協議，如果您需要轉載，請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.

相關問題 從並行Celery任務執行中收集結果芹菜以及如何發送任務如何確保 Django 模型在 Celery 任務執行之前保存？如何確保Celery任務以正確的設置運行？如何使用celery守護程序調用celery任務任務中的芹菜任務如何測量芹菜任務持續時間如何暫停或恢復芹菜任務？如何確定芹菜中任務的名稱？如何在 celery 中定期運行任務？

相關標簽