【发布时间】:2017-09-13 22:28:47
【问题描述】:
我在 Azure 中创建了 HDInsight 的 Spark 集群。现在我想将处理后的数据存储到 HBASE 中,我不想创建单独的 HBASE HDInsight 集群并使用 VNET 连接到 Spark 集群。
这是因为我们限制每个区域 60 个核心(例如美国东部 2)。我已经并且想要将所有 60 个内核用于我的 Spark 集群。于是想到在 HDInsight 的 spark 集群中安装 HBASE。
当我在 HDInsight Spark 群集中创建时,似乎已经有一个 HBASE 实例正在运行。但这不会显示在 Azure 的 Cluster Dashboard(Ambari) 或其任何配置中。
而且我不确定它是否正常工作。当我执行“hbase shell”时,我得到了如下所示的错误。
那么,如何在我的 Spark HDInsight 集群中进行正确的 hbase 安装和配置?有可能吗?
【问题讨论】:
标签: azure hadoop apache-spark hortonworks-data-platform azure-hdinsight