【问题标题】:Kafka Connect Logs per connector每个连接器的 Kafka Connect 日志
【发布时间】:2019-05-31 19:20:48
【问题描述】:

我正在使用 Kafka 休息代理启动融合连接器,但在读取日志中的错误时出现问题,所有日志都写入 connect.stdout 文件
我需要在单独的日志文件中记录每个连接器的日志。

像 JDBC-testTable-source.log、Cassandra-dump-sink.log 这样我可以将其发送给最终用户

我尝试使用 grep 命令将日志与 connect.stdout 文件分开 和用于记录的 log4j 文件

【问题讨论】:

  • Kafka Connect Logging的可能重复
  • Confluent Rest Proxy 不与 Connect 交互...我认为您只是混淆了标准 Connect 的 REST API,它与 Confluent 无关

标签: logging apache-kafka apache-kafka-connect


【解决方案1】:

从 Apache Kafka 2.2 开始,worker 将所有内容记录到单个日志文件中,每个条目都没有指示它来自哪个连接器。

KIP-449 将被添加到 Apache Kafka 2.3 中,它将更容易识别哪个日志条目来自哪个连接器。

【讨论】:

  • 是的,我们不能分离日志,但是我们可以在 connect.stdout 上使用 grep 命令来获取一些日志
猜你喜欢
  • 2018-07-13
  • 1970-01-01
  • 1970-01-01
  • 2021-01-13
  • 2019-06-17
  • 2020-08-05
  • 2021-11-28
  • 2019-07-03
  • 2019-04-24
相关资源
最近更新 更多