有人在不使用 EMR 的情况下使用 DynamoDB 和 Hive？答案

【问题标题】：Anyone using DynamoDB and Hive without using EMR?有人在不使用 EMR 的情况下使用 DynamoDB 和 Hive？
【发布时间】：2012-04-19 22:45:37
【问题描述】：

但根据该链接，需要在 EMR 之上设置 Hive。但是我想知道我是否可以将这种集成与我已经拥有的独立 Hadoop 集群一起使用，而不是使用 EMR。有人做过吗？与使用 EMR 相比，DynamoDB 和 HDFS 中的数据会不会出现同步问题？

【问题讨论】：

【解决方案1】：

为了能够在您自己的集群上使用它，您需要为 DynamoDB 自定义 StorageHandler（它可能还涉及自定义 SerDe）。

目前似乎没有，至少在 AWS 网站上没有。

您可以使用 Amazon 提供的 JDBC interface 从您的集群中生成查询，但仍会在 EMR 之上执行。

【讨论】：