【问题标题】:Logstash indexing twice when input from file从文件输入时,Logstash 索引两次
【发布时间】:2016-09-15 06:33:20
【问题描述】:

当 Logstash 从日志文件索引时,只要有新的日志事件,它就会将它与日志文件中的先前日志一起索引到 elasticsearch 索引。如何使其可配置以便仅索引新的日志事件? P.S start_position 未设置,默认为 end。

【问题讨论】:

  • 是否正在创建.sincedb 文件?检查文件是否存在以及是否有任何内容。

标签: logstash elastic-stack


【解决方案1】:
  • 首先检查您的 sincedb-文件。 ($HOME/.sincedb) 每次解析后都要保持偏移量。
  • 确保您没有sincedb_path 设置为 /dev/null
  • 确保您没有 start_position 设置为“开始”

【讨论】:

  • 如果他在每个日志之前重新启动他的实例,这将适用,但听起来情况并非如此
猜你喜欢
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 2023-02-03
  • 2015-01-06
  • 2014-07-24
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
相关资源
最近更新 更多