【发布时间】:2017-07-19 05:33:57
【问题描述】:
我在 HDP 2.4 上运行 Spark 1.6.1,我想知道我们是否可以在 Yarn HDP 2.4 集群上运行 Spark 2 驱动程序?
提前谢谢你。
【问题讨论】:
-
你必须使用Horton自己提供的组装罐(一个180Mo的大罐)。
标签: apache-spark hadoop-yarn hortonworks-data-platform
我在 HDP 2.4 上运行 Spark 1.6.1,我想知道我们是否可以在 Yarn HDP 2.4 集群上运行 Spark 2 驱动程序?
提前谢谢你。
【问题讨论】:
标签: apache-spark hadoop-yarn hortonworks-data-platform
您可以运行 SPARK 2.0,但 HDP 平台不支持它。因为现在 SPARK 2.0 包含在 HDP 2.5 中作为技术预览。更多信息可以查看官方documentation。
【讨论】: