【发布时间】：2019-09-25 15:49:32
【问题描述】：
我正在尝试针对 TPCH 数据集中的表 LINEITEM 加载 TPCH DATA。
我需要针对该表创建季度分区。默认情况下会创建每日分区。由于表很大，大查询表作业在 2000 个左右分区后会失败。
如何为 LINEITEM 表创建季度分区？
【问题讨论】：
标签： google-bigquery
【发布时间】：2019-09-25 15:49:32
【问题描述】：
BigQuery 中您只能使用 DATE 或 TIMESTAMP 分区。
https://cloud.google.com/bigquery/docs/partitioned-tables#partitioned_tables
您应该最多可以访问 4,000 个分区，但您可能会达到以下限制（来自链接）：An individual operation can commit data into up to 2,000 distinct partitions.。你能把你的加载工作分解成更小的步骤吗？
【讨论】：
-
感谢您的快速回答。即使是 4000 个分区也无法工作。因为这将是多年（2000-2019 年左右）的每日分区。我正在查看季度分区支持或年度分区支持。如果有任何支持？日常分区不起作用
-
如果我尝试使用“PARTITION by date_trunc(l_shipdate,year)”作为“CREATE TABLE SYNTAX”的一部分。它不采用语法。我不能在表中添加一个新列，比如 l_shipdate_year我的查询的语法需要更改。TPCH 查询主要使用 l_shipdate >
或 l_shipdate 。现在要利用分区修剪，我可能必须添加一个新过滤器 l_shipdate_year > 来进行分区修剪除了我的常规过滤器 l_shipdate > 和 l_shipdate