错误 403：在 Python 库上运行 BigQuery 同步查询时响应过大

Question

我正在使用 Python 客户端库在 Google BigQuery 中运行一个简单的 SELECT 同步查询。我收到以下错误：

*** google.cloud.exceptions.Forbidden: 403 Response too large to return. Consider setting allowLargeResults to true

我为此目的使用run_sync_query()。

我的做法是（去掉不必要的东西）：

def run_query(query_str):
    from google.cloud import bigquery
    client = biquery.Client()
    query = client.run_sync_query(query_str)
    query.run()
    return query.fetch_data()

我知道API documentation 中有一个参数allowLargeResults，但我不知道如何从客户端库中设置该参数。

Answer 1

你可以这样设置：

query.allow_large_results = True

https://github.com/GoogleCloudPlatform/google-cloud-python/blob/e716fbef3dc74e8853346426af356bad364f6637/bigquery/google/cloud/bigquery/job.py#L1090

但是，如果您设置了allow_large_results，那么您还必须指定一个目标表以将结果写入：

https://cloud.google.com/bigquery/docs/reference/rest/v2/jobs#configuration.query.allowLargeResults

[可选] 如果为 true 且查询使用旧版 SQL 方言，则允许查询 以较低的成本生成任意大的结果表 表现。需要设置destinationTable。对于标准 SQL 查询时，此标志将被忽略，并且始终允许大结果。 但是，当结果大小超过时，您仍然必须设置destinationTable 允许的最大响应大小。