【问题标题】:Selecting the right cloud storage option on GCP在 GCP 上选择正确的云存储选项
【发布时间】:2018-12-07 16:47:34
【问题描述】:

我是一家初创公司的入门级开发人员。我正在尝试在 GCP 上部署文本分类器。为了存储输入(训练数据)和输出,我正在努力寻找合适的存储选项。

我的数据在列方面并不庞大,但在实例方面却相当庞大。它甚至可能只是键值对。我的用例是从数据库中的一个特定列中检索每个实体,对其应用一些分类并将结果存储在相应的列中并更新数据库。我们的平台需要一个可以同时处理大量小查询而没有太多延迟的数据库。此外,数据完全不相关。

我查看了 GCP 关于选择存储选项的文章,但无法将我的选择范围缩小到任何具体答案。很想在这方面得到一些建议。

【问题讨论】:

  • 你可以看看MongoDBGoogle Cloud Datastore

标签: google-cloud-platform google-cloud-storage


【解决方案1】:

您应该看看 Google 的“选择存储选项”指南:https://cloud.google.com/storage-options/

您的数据是结构化的,您的主要目标不是分析,您的数据不是关系数据,您通常不需要移动 SDK,因此您可能应该使用 Cloud Datastore。这是持久键值数据的绝佳选择。

【讨论】:

  • 就我的用例而言,BigTable 与 Datastore 相比如何?
  • 如果我的数据是非结构化的怎么办?那么 BigTable 会是更好的选择吗?
  • 如果你的数据是完全非结构化的,比如它有一个 ID,然后数据是一些任意字节,比如图像文件或其他东西,谷歌云存储可能是你最好的选择,特别是如果数据值相当大(兆字节)。
  • 这是一个文本分类器。训练数据没有图像,只有一小段带标签的文本。
【解决方案2】:

简而言之,这些是 storage options available。将来可能会或多或少。


根据选择,您可以选择最适合的存储选项。
来源:Linux Academy

【讨论】:

    猜你喜欢
    • 2019-03-07
    • 2023-04-10
    • 1970-01-01
    • 1970-01-01
    • 2012-12-31
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2019-01-16
    相关资源
    最近更新 更多