【发布时间】:2019-07-08 14:34:10
【问题描述】:
最近我在作业详细信息视图中的作业日志中充满了以下条目:
"Worker configuration: [machine-type] in [zone]."
作业本身似乎工作正常,但这些条目之前没有出现,我担心因此我无法发现有意义的日志条目。
【问题讨论】:
标签: google-cloud-dataflow apache-beam spotify-scio
最近我在作业详细信息视图中的作业日志中充满了以下条目:
"Worker configuration: [machine-type] in [zone]."
作业本身似乎工作正常,但这些条目之前没有出现,我担心因此我无法发现有意义的日志条目。
【问题讨论】:
标签: google-cloud-dataflow apache-beam spotify-scio
是的,这些日志是垃圾邮件,无需担心。我已经提交了一个内部错误来减少这些垃圾日志(这是第一个)。在修复它的同时,您可以熟悉Stackdriver Logs Exclusion feature。这允许您创建过滤器以根据用户定义的查询排除日志。
以下是排除特定 Datawflow 日志的步骤:
resource.type="dataflow_step" "Worker configuration")【讨论】:
而且您现在不应该看到此类日志垃圾邮件用于新安排的作业!我们添加了逻辑来防止此类消息的过多记录。
【讨论】: