我们如何捕获谷歌 Vertex AI 上的所有容器日志？

Question

我在 AI 平台上有一个用于在线预测的端点（统一） 并且只能找到带有severity >= ERROR 的日志..

使用以下方式部署模型：--enable-container-logging

容器内的记录器代码：

module_logger = logging.getLogger("MODULE_NAME")
module_logger.setLevel(logging.INFO)

handler = logging.StreamHandler()
handler.setFormatter("%(asctime)s — %(name)s — %(levelname)s — %(funcName)s:%(lineno)d — " "%(message)s")
module_logger.addHandler(handler)

查询： resource.type="aiplatform.googleapis.com/Endpoint" resource.labels.endpoint_id="ENDPOINT_ID" resource.labels.location="us-central1"

两个问题：

1. 我们如何确保容器记录的所有日志都被记录并在日志查看器中看到？

2. 严重程度如何？控制台/平台是如何推导出来的？

Answer 1

回答我自己：

1. Container logs that are logged to stdout or stderr are captured by the gcloud logger
2. 似乎没有明确的文档，但似乎stderr 日志被解释为具有严重性ERROR 而标准输出为INFO