如何使用 Datadog 发布处理 JSON 日志？

Question

我们的应用程序以 JSON 格式登录。根据 Datadog 的文档，管道不处理 JSON 日志。如何使用基于同一日志行的不同值的附加字段来丰富 JSON 日志？

我有这行：

{"requestUri":"/customers/2934ht8/users"}

我想要这条线：

{"requestUri":"/customers/2934ht8/users","customerId":"2934ht8"}

Datadog 可以做到这一点吗？我不想将我们的记录器更改为customerId 到日志输出。

Answer 1

是的，这是可能的。您可以使用 grok 解析器在 processing pipeline 中执行此操作，但您需要在高级设置 (docs here) 中配置 grok 解析器应用于哪个属性。 （默认情况下 grok 解析器适用于“消息”属性，但您可以将它们配置为解析任何属性。）

在这种情况下，您需要将 Extract From 字段设置为 requestUri。 Helper Rules 部分不是必需的。然后在主要的Define Parsing Rules 部分中，您将插入类似于以下的规则：

parse_customer_id \/customers\/%{notSpace:customerId}\/users

甚至更远

parse_customer_id \/%{notSpace}\/%{notSpace:customerId}\/%{notSpace}