一个具有唯一索引的多个应用程序的 elasticsearch/logstash 实例

Question

我们使用 swisscoms 应用程序云，目前正在评估新的 Elasticsearch 服务。我们设置它包括logstash和kibana。

现在，我们为每个应使用通用 elasticsearch/logstash/kibana 实例的应用添加了用户提供的服务。当我们第一次登录到 kibana 时，我们看到有一个名为 logstash- 的索引，所有应用程序的所有日志都在其中。

现在我们想要的是为每个写入我们 elk 实例的应用程序建立一个索引。假设我们有 e 应用程序（app1、app2、app3）。我们希望有三个索引（app1-...、app2-... 和 app3-...）。关于我们如何实现这一目标的任何想法？

这是必须在 Cloud Foundry 上使用 ENV 变量完成的配置，还是我们必须在 Java 和 NodeJS 应用程序中配置的东西

(app1-... , ...)?

提前感谢您的帮助。

Answer 1

您可以使用Elasticsearch output plugin for logstash，这是在 Elasticsearch 中存储日志的推荐方法。该插件有一个名为index 的配置选项，用于定义要写入事件的索引的名称。默认索引名称为logstash-%{+YYYY.MM.dd}

将它与if 条件结合使用，根据类型为每个应用分配索引名称，如下所示，

output {
  if [type] == "apache" {
    elasticsearch {
      index => "apache-website-index"
    }
  } elseif [type] == "nginx" {
      elasticsearch {
        index => "nginx-website-index"
    }
  }
}

也请查看this answer

如果您有任何问题，请发表评论。