【发布时间】:2022-11-03 20:48:51
【问题描述】:
“我有一个要求,我需要在 GCP-Databrciks 集群上安装 GCP 存储桶,但我在上面找不到任何合适的文档;我的意图是将该桶用作外部表位置”
【问题讨论】:
标签: google-cloud-platform databricks
“我有一个要求,我需要在 GCP-Databrciks 集群上安装 GCP 存储桶,但我在上面找不到任何合适的文档;我的意图是将该桶用作外部表位置”
【问题讨论】:
标签: google-cloud-platform databricks
Databricks 挂载在工作区和云对象存储之间创建了一个链接,这使您能够使用相对于 Databricks file system 的熟悉文件路径与云对象存储进行交互。与 Google Cloud Storage、BigQuery 和 Google Cloud AI Platform 的紧密集成使 Databricks 能够跨 Google Cloud 上的数据和 AI 服务无缝工作。要从 GCS 存储桶读取或写入,您必须创建附加的服务帐户并且必须关联存储桶在创建集群时使用服务帐户。使用您为服务帐户生成的密钥直接连接到存储桶。
有关使用已安装 GCS 存储桶的文档,请参阅Mounting cloud object storage on Databricks
【讨论】: