【问题标题】:Azure Cluster, Cluster terminated.Reason:Network configuration failureAzure 集群,集群终止。原因:网络配置失败
【发布时间】:2022-01-23 13:42:32
【问题描述】:

我今天无法启动 Azure 集群:

有时我会收到此错误,有时会通过但我收到以下信息:

知道这是什么原因造成的吗?

【问题讨论】:

  • 请分享初始化脚本
  • 我无法通过 dbfs 访问它,也无法运行命令,因为集群不工作
  • 您的工作区中似乎存在网络问题。也许添加了防火墙或类似的东西?
  • 我们工人没有添加防火墙。这发生在晚上。

标签: azure cluster-computing databricks azure-databricks


【解决方案1】:

按照错误信息中的建议,

这可能是因为您的虚拟机没有出站连接到 DBFS 存储。还可以考虑将您的集群升级到更高版本的 spark 版本。

将您的集群升级到更高的 spark 版本。这可能会解决您的问题。

参考this SO问题

【讨论】:

  • Spark 版本很好,我们运行另一个相同版本的集群,它可以正常工作。
猜你喜欢
  • 1970-01-01
  • 2018-11-08
  • 1970-01-01
  • 2016-08-23
  • 2020-10-28
  • 2019-11-15
  • 2012-06-02
  • 2018-05-10
  • 2019-11-04
相关资源
最近更新 更多