【发布时间】:2019-11-21 22:26:54
【问题描述】:
在 HDFS Hive ORC ACID for Hive MERGE 上没有问题。
在 S3 上不可能。
对于 Azure HD Insight,我从文档中不清楚 Azure Blob Storage 上的此类表是否可行?寻求确认或其他方式。
我很确定不行。但是,请参阅我给出的答案更新。
【问题讨论】:
标签: hive azure-blob-storage orc acid
在 HDFS Hive ORC ACID for Hive MERGE 上没有问题。
在 S3 上不可能。
对于 Azure HD Insight,我从文档中不清楚 Azure Blob Storage 上的此类表是否可行?寻求确认或其他方式。
我很确定不行。但是,请参阅我给出的答案更新。
【问题讨论】:
标签: hive azure-blob-storage orc acid
根据Azure HDInsight官方文档Azure HDInsight 4.0 overview如下图,
据我所知,Hive MERGE 需要 MapReduce,但 HDInsight 不支持 Hive,因此也不可能。
问题海报更新
HDInsight 4.0 不支持用于 Apache Hive 的 MapReduce。请改用 Apache Tez。因此,对于 Tez,它仍然可以工作,并且从带有 Hive 3 和仓库连接器的 https://docs.microsoft.com/en-us/azure/hdinsight/hdinsight-version-release Spark 也是选项。
【讨论】: