AWS Glue python shell 作业因内部服务错误而失败

Question

我在 AWS Glue 中运行一个 python shell 程序，但在运行大约 10 分钟后它失败并出现错误内部服务错误。日志或错误日志不提供任何信息。大多数情况下，它只是说Internal service error 就失败了，很少会运行 2 天并超时。该代码使用 pandas 进行转换，它看起来不错，它在本地机器上运行良好，进行了必要的更改，以便它可以在 AWS 胶水上工作[它将文件读/写到 s3 位置而不是本地文件夹]。这里有什么问题？任何意见表示赞赏。

Answer 1

这个问题已经解决了。问题是由于对 s3 存储桶的访问问题，该作业无法下载依赖的 python 库。访问问题解决后，作业开始正常运行。