【问题标题】:Running Spark 2 on HDP 2.4在 HDP 2.4 上运行 Spark 2
【发布时间】:2017-07-19 05:33:57
【问题描述】:

我在 HDP 2.4 上运行 Spark 1.6.1,我想知道我们是否可以在 Yarn HDP 2.4 集群上运行 Spark 2 驱动程序?

提前谢谢你。

【问题讨论】:

  • 你必须使用Horton自己提供的组装罐(一个180Mo的大罐)。

标签: apache-spark hadoop-yarn hortonworks-data-platform


【解决方案1】:

您可以运行 SPARK 2.0,但 HDP 平台不支持它。因为现在 SPARK 2.0 包含在 HDP 2.5 中作为技术预览。更多信息可以查看官方documentation

【讨论】:

    猜你喜欢
    • 2020-11-16
    • 2014-08-25
    • 2018-05-23
    • 1970-01-01
    • 1970-01-01
    • 2016-10-21
    • 1970-01-01
    • 1970-01-01
    • 2021-11-24
    相关资源
    最近更新 更多