【问题标题】:is it possible to read a Google Drive folder (all files) as BigQuery external data source?是否可以将 Google Drive 文件夹(所有文件)读取为 BigQuery 外部数据源?
【发布时间】:2020-12-17 08:57:06
【问题描述】:

我在 BigQuery 中使用 Google Drive 作为外部数据源。我可以访问单个文件,但无法读取包含多个文件的文件夹。

注意: 我已经从 Google Drive 中获取文件夹的可共享链接,并使用“bq mk..”命令引用链接 ID。虽然创建了表但是无法拉取数据。

【问题讨论】:

    标签: google-bigquery flysystem-google-drive


    【解决方案1】:

    我没有用驱动器尝试过,所以我不知道它的性能如何,但是在定义外部表(或加载作业)时,您可以将源数据指定为 URI 列表。我怀疑它不是特别可扩展,并且可能会遇到驱动器限制,因为这不是典型的访问模式。谷歌云存储是一个更适合这种事情的数据源。

    【讨论】:

    • 我同意,但我在 Google Drive 文件夹中存储了一些文件,并希望使用 BigQuery 访问它
    猜你喜欢
    • 1970-01-01
    • 2020-09-17
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2017-11-25
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多