【问题标题】:Integration of pubsubeat with elasticsearchpubsubbeat 与 elasticsearch 的集成
【发布时间】:2019-05-23 13:58:43
【问题描述】:

我正在学习如何将 pubsub 与 elasticsearch 集成。有多种选择,例如pubsubbeatGoogle_pubsub input pluginGoogle Cloud Pub/Sub Output Plugin

我目前正在尝试使用 pubsubbeat,但在按照建议运行命令“ ./pubsubbeat -c pubsubbeat.yml -e -d "*" ”后卡住了。控制台日志如下

2019-05-23T14:42:19.949+0100    INFO    instance/beat.go:468    Home path: [/home/amishra/pubsubbeat-linux-amd64] Config path: [/home/amishra/pubsubbeat-linux-amd64] Data path: [/home/amishra/pubsubbeat-linux-amd64/data] Logs path: [/home/amishra/pubsubbeat-linux-amd64/logs]
2019-05-23T14:42:19.949+0100    DEBUG   [beat]  instance/beat.go:495    Beat metadata path: /home/amishra/pubsubbeat-linux-amd64/data/meta.json
2019-05-23T14:42:19.949+0100    INFO    instance/beat.go:475    Beat UUID: 4bd6119e-603a-426c-9d5b-6ac588bb000e
2019-05-23T14:42:19.949+0100    INFO    instance/beat.go:213    Setup Beat: pubsubbeat; Version: 6.2.2
2019-05-23T14:42:19.949+0100    DEBUG   [beat]  instance/beat.go:230    Initializing output plugins
2019-05-23T14:42:19.949+0100    DEBUG   [processors]    processors/processor.go:49  Processors: 
2019-05-23T14:42:19.952+0100    INFO    pipeline/module.go:76   Beat name: allspark
2019-05-23T14:42:19.952+0100    INFO    [PubSub: dev/elk-logstash-poc/logstash-poc] beater/pubsubbeat.go:54 config retrieved: &{Project:dev Topic:elk-logstash-poc CredentialsFile:/home/amishra/key/key.json Subscription:{Name:logstash-poc RetainAckedMessages:false RetentionDuration:5h0m0s} Json:{Enabled:false AddErrorKey:false}}

再想一想,我尝试了解决方案 2,但遇到了错误,还无法解决

io.grpc.internal.ManagedChannelImpl$NameResolverListenerImpl onError
WARNING: [io.grpc.internal.ManagedChannelImpl-1] Failed to resolve name. status=Status{code=UNAVAILABLE, description=Unable to resolve host pubsub.googleapis.com, cause=java.net.UnknownHostException: pubsub.googleapis.com

任何关于如何使事情发挥作用的线索都会有很大的帮助

【问题讨论】:

    标签: linux elasticsearch google-cloud-platform logstash google-cloud-pubsub


    【解决方案1】:

    问题以意想不到的方式得到解决,即在新机器上安装和部署。根本原因仍然未知。

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2018-03-02
      • 2018-06-04
      • 2018-07-09
      • 2013-11-11
      相关资源
      最近更新 更多