从 Bigquery 中的查询复制表答案

【问题标题】：Copy tables from query in Bigquery从 Bigquery 中的查询复制表
【发布时间】：2016-10-04 08:40:44
【问题描述】：

我正在尝试修复字段类型错误（但不包含数据）的 Bigquery 表的架构。我想使用 UI (select * except(bad_column) from ...) 将数据从旧模式复制到新模式。

问题是：

有没有比创建一个所有列都可以为空/重复的新表或手动转换所有数据更好的解决方案？

【问题讨论】：

您可能已经看到了这一点，但如果没有看到，旧版到标准 SQL 的迁移指南建议了几种处理 REQUIRED 到 NULLABLE 转换的方法：cloud.google.com/bigquery/sql-reference/…。

【解决方案1】：

更新（2018 年 6 月 20 日）：BigQuery 现在支持标准 SQL 中查询输出的必填字段，并且从 2017 年年中开始支持。

具体来说，如果您将查询结果附加到具有必填字段的架构的表中，则该架构将被保留，并且 BigQuery 将在写入结果时检查它是否包含空值。如果您想将结果写入一个全新的表，您可以创建一个具有所需架构的空表并附加到该表。

过时：

您有多种选择：

您提到通过 JSON 导出会丢失日期信息。你能澄清一下吗？如果您指的是分区日期，那么不幸的是，我认为上述任何解决方案都会将所有数据折叠到今天的分区中，除非您使用 table$yyyymmdd 语法明确插入到命名分区中。（这可行，但如果您的数据分布在多个日期，则可能需要大量操作。）

【讨论】：

【解决方案2】：

BigQuery 现在支持表克隆功能。表克隆是另一个表的轻量级、可写副本

【讨论】：