【问题标题】:what is better for clickstraem dynamodb or hdfs?clickstraem dynamodb 或 hdfs 哪个更好?
【发布时间】:2022-11-24 23:18:04
【问题描述】:

我们需要考虑哪个选项更好

我们想创建非常大的点击流场景是: 事件-运动-lambda-DB 。 一切都需要实时或接近实时,云是:AWS 我们的选择:HDFS 或 Dynamodb

【问题讨论】:

    标签: amazon-web-services apache-spark hive amazon-dynamodb hiveql


    【解决方案1】:

    这最终取决于您将如何使用数据。从写入的角度来看,EMR 和 DynamoDB 上的 HBASE 都可以很好地处理分布式数据。

    但是你打算以后如何使用数据,HBASE 可能更适合你打算对数据运行分析过程,而 DynamoDB 更适合你想要使用键值读取的 OLTP 类型访问数据。

    DynamoDB 确实具有有助于分析的功能,例如导出到 S3 和 Spark/Hive 连接器。它是无服务器的,因此您无需担心管理它。

    HBASE/HDFS 非常适合分析,但比 DynamoDB 有更多的操作开销。确保高可用性可能很困难。

    这是您必须根据您的特定需求做出的选择。客户通常不会在不先了解他们使用数据的需求的情况下选择其中一个。

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 1970-01-01
      • 2013-03-16
      • 1970-01-01
      • 2011-02-22
      • 2013-06-06
      • 2013-11-02
      • 1970-01-01
      • 2013-03-21
      相关资源
      最近更新 更多