【发布时间】:2018-09-17 17:43:38
【问题描述】:
如果向 Apache YARN 集群提交新作业,状态页面通常会显示作业的实际提交方式(除其他外):
Application Type: SPARK
这表明用户最有可能使用 spark-submit 向资源管理器发出新作业。
是否可以像更改应用程序名称一样通过参数更改该字符串的值?
【问题讨论】:
标签: apache-spark hadoop hadoop-yarn
如果向 Apache YARN 集群提交新作业,状态页面通常会显示作业的实际提交方式(除其他外):
Application Type: SPARK
这表明用户最有可能使用 spark-submit 向资源管理器发出新作业。
是否可以像更改应用程序名称一样通过参数更改该字符串的值?
【问题讨论】:
标签: apache-spark hadoop hadoop-yarn
应用类型在 Spark 设置 yarn 应用上下文时设置。
AFAIK,无法通过某些配置来更改它。如果它真的很重要,您将不得不在源代码中覆盖它。
【讨论】: