【问题标题】:Is it possible to mount GCP storage bucket as a mount point in DataBricks which is also in the same project?是否可以将 GCP 存储桶挂载为 DataBricks 中的挂载点,该挂载点也在同一个项目中?
【发布时间】:2022-11-03 20:48:51
【问题描述】:

“我有一个要求,我需要在 GCP-Databrciks 集群上安装 GCP 存储桶,但我在上面找不到任何合适的文档;我的意图是将该桶用作外部表位置”

【问题讨论】:

    标签: google-cloud-platform databricks


    【解决方案1】:

    Databricks 挂载在工作区和云对象存储之间创建了一个链接,这使您能够使用相对于 Databricks file system 的熟悉文件路径与云对象存储进行交互。与 Google Cloud Storage、BigQuery 和 Google Cloud AI Platform 的紧密集成使 Databricks 能够跨 Google Cloud 上的数据和 AI 服务无缝工作。要从 GCS 存储桶读取或写入,您必须创建附加的服务帐户并且必须关联存储桶在创建集群时使用服务帐户。使用您为服务帐户生成的密钥直接连接到存储桶。
    有关使用已安装 GCS 存储桶的文档,请参阅Mounting cloud object storage on Databricks

    【讨论】:

      猜你喜欢
      • 2020-02-19
      • 2022-01-17
      • 1970-01-01
      • 2022-12-18
      • 2010-10-02
      • 2019-04-11
      • 1970-01-01
      • 1970-01-01
      • 2020-02-01
      相关资源
      最近更新 更多