【发布时间】:2021-01-26 00:28:58
【问题描述】:
我正在按照下面的教程并尝试使用 Azure Synapse 中的 Spark 引擎提交 Spark 作业。
提交失败,出现以下错误:
Error:
{
"code": "SparkJobDefinitionActionFailed",
"message": "Spark job batch request for workspace contosows, spark compute contosospark with session id null failed with a system error. Please try again",
"target": null,
"details": null,
"error": null
}
任何人都可以就如何解决它提供一些指导/建议吗?
有关我的设置的更多信息。
- 区域:Azure Synapse 工作区 + ADLS Gen2 的东南亚地区
- 我按照建议授予自己存储 Blob 数据所有者和存储 Blob 数据参与者角色。
- 使用的教程:
- https://docs.microsoft.com/en-us/azure/synapse-analytics/quickstart-create-workspace
- https://docs.microsoft.com/en-us/azure/synapse-analytics/quickstart-create-apache-spark-pool-portal
- https://docs.microsoft.com/en-us/azure/synapse-analytics/spark/apache-spark-job-definitions
谢谢!
【问题讨论】:
-
你还在面对这个问题吗?你在使用 Python / Scala 部分吗?
-
如果对你有用,可以accept it as an answer吗?它可能会帮助更多有类似问题的人。
标签: azure apache-spark azure-synapse