从 GCS 加载 JSON 时出错

Question

我正在尝试将 GCS 中的架构和数据作为 JSON 文件加载。为此，我正在使用命令行。

bq load --source_format=NEWLINE_DELIMITED_JSON --schema=gs://1samtest/JSONSample/personsDataSchema.json SSData.persons_data gs://1samtest/JSONSample/personsData.json

但我收到此错误：

//1SAMTEST/JSONSAMPLE/PERSONSDATASCHEMA.JSON 不是有效值

但是当我将所有路径更改为我的本地机器时，它完全可以使用文件。但是不知道为什么json会出错。

如果我在 BigQuery 中创建表后像下面这样运行，它可以正常工作。

bq load  --source_format=NEWLINE_DELIMITED_JSON SSData.persons_data  "gs://1samtest/JSONSample/personsData.json"

Answer 1

schema 标志/参数不支持 GCS 的 URI，即使用 gs://...

bq load --help

[destination_table] 是要访问的表的全限定表名 如果表已经存在，则创建或追加。

[source] 参数可以是单个本地文件的路径，也可以是 以逗号分隔的 URI 列表。

[schema] 参数应该是 JSON 文件的名称或文本模式。如果表已经有，则应省略此架构。

只有 source 标志/参数（即数据）可以与 GCS URI 一起使用。