【问题标题】:Getting GCS path metadata for BigQuery external tables获取 BigQuery 外部表的 GCS 路径元数据
【发布时间】:2020-10-31 11:00:29
【问题描述】:

使用永久外部表查询 Cloud Storage 数据时,

CREATE OR REPLACE EXTERNAL TABLE mydataset.sales
OPTIONS (
  format = 'CSV',
  uris = ['gs://mybucket/sales-google.csv', 'gs://mybucket/sales-microsoft.csv']
)

有没有办法知道该行是从哪个文件中提取的?元数据?

SELECT * FROM mydataset.sales

【问题讨论】:

    标签: google-bigquery google-cloud-storage external-tables


    【解决方案1】:

    您可以使用此处概述的 _FILE_NAME 伪列:

    https://cloud.google.com/bigquery/external-data-drive#the_file_name_pseudo_column

    【讨论】:

      【解决方案2】:

      使用_FIE_NAME伪列:

      SELECT 
        *,
        _FILE_NAME AS file_name
      FROM mydataset.sales
      

      【讨论】:

        猜你喜欢
        • 2022-11-17
        • 1970-01-01
        • 2023-03-29
        • 2015-01-16
        • 1970-01-01
        • 2015-05-23
        • 1970-01-01
        • 2011-09-25
        • 1970-01-01
        相关资源
        最近更新 更多