工作编排

Question

我目前正在重做所有数据库业务流程作业（ETL，备份，日常任务，报表编译等）

为此，我需要一个任务/工作协调器，我可以在其中定义任务依赖，基于时间的任务，异步任务等。

我正在研究芹菜和基于流程的编程技术，但我不确定这些对我的用例有好处。

我正在寻找一个能够支持所有这些开箱即用的框架。 有什么建议？

Answer 1

可能要迟到，但我想提到Job runner可能是其他人到达这个问题。

从他们的GitHub存储库README.rst：

Job-Runner是一个类似于crontab的工具，有一个很好的Web前端，用于管理和（实时）监控当前状态。

特征：

• 安排定期工作
• 工作的链接
• 通过将工作人员放入池中来平衡工作负载
• 安排作业在池中的所有工作人员上运行
• 实时仪表板（可选择终止运行和临时调度）
• 多个项目和每个项目的权限管理