在所有项目中查找 Bigquery 表大小

Question

我们正在 Bigquery 中维护一个表，该表从 Stack 驱动程序日志中捕获所有活动日志。该表帮助我列出了所有存在的表、用户、创建表的人、在表上运行的最后一个命令等跨组织中的项目和数据集。除了这些信息，我还想要我要检查的表的表大小。

我可以加入 TABLES 和 TABLE_SUMMARY 但是我需要明确指定要查询的项目和数据集，但我的驱动表包含多个项目的详细信息和数据集。

是否有任何其他元数据表我可以从中获取表大小，或者我可以加载到 Bigquery 表中以加入并获得所需结果的任何日志

Answer 1

您可以使用 bq 命令行工具。与the command：

bq show --format=prettyjson

这提供了 numBytes、datasetId、projectId 等。 您可以使用脚本：

bq ls

并遍历每个项目中的数据集和表以获取所需的信息。请记住，您还可以使用 API 或客户端库。