【问题标题】:Is it possible to interact Cloud SQL or Cloud Spanner with Google Data Catalog是否可以将 Cloud SQL 或 Cloud Spanner 与 Google 数据目录进行交互
【发布时间】:2020-09-29 15:36:04
【问题描述】:

我能够在 Google Data Catalog 中发现 Bigquery 数据集、GCS 文件,但在 Cloud Data Catalog UI 中找不到 Cloud SQl 或 Cloud Spanner 选项。

是否可以在 Data Catalog 中查看 Cloud SQL 表、Cloud Spanner 表数据?如果是,请建议步骤或提供文档链接。

谢谢。

【问题讨论】:

    标签: google-cloud-platform google-cloud-sql google-cloud-spanner google-data-catalog


    【解决方案1】:

    是的,可以使用数据目录custom entries

    要查看 Cloud SQL 表,您可以将open source connectors 用于 MySQL、SQL Server 和 PostgreSQL。

    还可以检查official docs 中的本地提取用例。

    【讨论】:

      【解决方案2】:

      是的,有可能 细节: 除了原生元数据类型 GCS、PUB/SUB 和 BigQuery 需要通过 Catalog-API 处理

      参考:https://cloud.google.com/data-catalog/docs/how-to/custom-entries

      即, 使用 7 种语言中的一种以编程方式循环访问自定义数据源(例如 BigTable)中的所有表并动态创建标记。

      我最喜欢的 Python 和 C#

      如果有人有更好的替代方法,非常感谢

      【讨论】:

        【解决方案3】:

        很遗憾,Data Catalog、Cloud SQL 和 Cloud Spanner 之间没有原生集成。不过,有一个关于此功能的issue tracker 报告。

        正如您在共享链接中所见,作为一种变通方法,您可以手动创建一个到 Spanner 的 JDBC 连接器,并按计划将元数据导出到 Data Catalog custom entries。类似于 Mahendren 的建议。您可以使用 Cloud SQL 执行类似的操作

        【讨论】:

          猜你喜欢
          • 2017-07-07
          • 2019-07-07
          • 1970-01-01
          • 2017-10-24
          • 1970-01-01
          • 2020-06-10
          • 1970-01-01
          • 2017-07-28
          • 2017-07-05
          相关资源
          最近更新 更多