将旧日志从 Stackdriver 导出到 Bigquery

Question

我的 Stackdriver 日志可以追溯到 9 月 3 日，而我在 9 月 14 日创建的接收器将这些日志提取到 Bigquery 数据集中。目前，Bigquery 中的数据仅从我创建接收器时开始。我可以将以前的日志导出到一个巨大的 .csv 文件然后重新上传吗？ I found a similar question here, but with no answer.

谢谢，很抱歉我的问题没有更多技术性 - 我是 Stackdriver 日志记录的新手！

Answer 1

由于仅针对新日志条目进行导出，因此您无法导出 Logging 在创建接收器之前收到的日志条目。请参考这个Documentation

Answer 2

截至 2021 年底，一个称为 copy logs 的 Alpha 版功能可用，它允许您将旧日志转储到 GCS 存储桶中，然后从那里返回 BigQuery 的短暂旅程。

需要注意的是，这必须通过 shell 完成，并且作为 alpha 功能，不提供任何保证或 SLA。

在此功能之前，您会很不走运。下载旧日志每个请求只允许 10K 日志。