【发布时间】:2022-01-09 19:05:04
【问题描述】:
场景: 日志格式如下:
<SequenceID> <Level> <Message>
我需要根据 Grafana 的 SequenceID 对日志进行排序。
背景:我正在使用 promtail 发送日志,并在其中为 SequenceID 和 Level 创建标签。 但是,我无法在 Grafana Dashboard 上找到任何有效的可视化/转换选项(面板/小部件),这将帮助我创建一个表格,在该表格中我可以根据 sequenceID 对日志条目进行排序。
另请注意:日志是在微秒级别生成的,因此不能依赖时间戳。
PS: 为标签“SequenceID”添加转换“标签到字段”时,出现以下错误: 请注意:
【问题讨论】:
-
只是一个注释,如果你有很多值,那么有一个 sequence_id 标签可能不是一个好的设计。您将发生日志流爆炸,这将影响性能:grafana.com/docs/loki/latest/best-practices
-
我同意。太多的标签和值组合会导致太多的流 - 这会导致日志存储中的索引大而块小。这反过来又会降低性能。有任何最佳实践/建议可以克服上述问题吗?
-
我注意到在 Log shipper(例如 Promtail)中在日志处理时指定标签与通过模式解析器提取标签值之间存在重大差异。后者在日志查询时,不会导致高基数。这个解决方案可能不是最适合上述情况,但仍然是一个值得注意的点。参考:grafana.com/blog/2021/08/09/…
标签: logging grafana grafana-loki promtail