AWS Glue python shell 作业因内部服务错误而失败

Question

我正在 AWS Glue 中运行一个 python shell 程序，但是在运行大约 10 分钟后它失败了，错误为Internal service error 。 日志或错误日志不提供任何信息。 大多数情况下，它只是说Internal service error而失败，很少会运行 2 天并超时。 代码使用 Pandas 进行转换，它看起来不错，它在本地机器上运行良好，完成了必要的更改，以便它在 AWS 胶水上工作[将文件读/写到 s3 位置而不是本地文件夹]。 这里可能有什么问题？ 任何输入表示赞赏。

Answer 1

这个问题想通了。 问题是由于对 s3 存储桶的访问问题，该作业无法下载相关的 Python 库。 访问问题解决后，作业开始正常运行。