Aws Glue Workflow 多次触发一项工作（不正确的行为）

Question

我有一个很大的胶水工作流程（大约 100 个作业/爬虫），直到上周它都在正常执行。 从那时起，我的第一个条件触发器 (ALL) 执行了 20 次相同的作业。

我自己配置了作业，只允许 1 次并行执行，但每次执行工作流时，它都会尝试启动 20 次（同一作业）。

还配置了工作流，以允许最大并发数为 1，但这并不能解决问题。

自从我开始使用胶水工作流程以来，我注意到它本身的工具有问题、陈旧，而且可能已被弃用？

有关如何解决此问题的任何提示？

Answer 1

我也遇到过类似的问题。 即使一个是固定的，最近也会出现其他问题。 所以我的建议是尝试使用阶跃函数。