【问题标题】:How to run huge datasets in Vertex AI如何在 Vertex AI 中运行庞大的数据集
【发布时间】:2022-10-06 02:42:04
【问题描述】:

我正在使用大型功能集(20,000 行 x 20,000 列),而 Vertex AI 的硬限制为 1,000 列。如何有效地将数据导入谷歌云,以便我可以在我的数据上运行 TensorFlow 模型或自动 ML?我无法找到有关此问题的文档。

标签: tensorflow google-cloud-platform google-cloud-automl google-cloud-vertex-ai


【解决方案1】:

您是否正在尝试使用数据集/AutoML?要尝试的一件事是功能存储 (https://cloud.google.com/vertex-ai/docs/featurestore) 或将其放入 BigQuery (https://cloud.google.com/blog/products/data-analytics/automl-tables-now-generally-available-bigquery-ml)。我知道这可能会改变您的工作流程,但应该能够容纳多达 10,000 列。

【讨论】:

    猜你喜欢
    • 2021-09-21
    • 2020-06-05
    • 1970-01-01
    • 1970-01-01
    • 2022-01-11
    • 2021-09-28
    • 2022-12-10
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多