使用 Spring Boot 的 Apache Kafka JMX 指标

Question

全部，

我需要将 Apache Kafka 指标公开给 Spring Boot (v 2.3.0.RELEASE) 执行器端点。

请注意，我没有使用spring-kafka库。

我正在使用以下库

        <dependency>
            <groupId>org.apache.kafka</groupId>
            <artifactId>kafka-streams</artifactId>
            <version>2.5.0</version>
        </dependency>


        <dependency>
            <groupId>org.apache.kafka</groupId>
            <artifactId>kafka-clients</artifactId>
            <version>2.5.0</version>
        </dependency>

我已经尝试过这个spring.jmx.enabled=true，但似乎这不起作用。我认为这是因为 spring 没有管理 kafka。

有没有办法可以将这些 JMX 指标绑定到千分表 MeterRegistry？

我可以使用 prometheus 提供的 jmx-exporter 来完成这项工作，但由于这需要一个在不同端口上运行的代理，我希望使用默认的 Micrometer 和 spring boot 来完成这项工作。

Answer 1

你试过KafkaClientMetrics、KafkaStreamsMetrics或KafkaConsumerMetrics吗？ KafkaConsumerMetrics 通过 JMX 收集指标，但已弃用，取而代之的是 KafkaClientMetrics。

您只需要创建它们并绑定到您的注册表：

KafkaConsumer<String, String> consumer;
KafkaProducer<String, String> producer;
MeterRegistry registry;

...

new KafkaClientMetrics(consumer).bindTo(registry);
new KafkaClientMetrics(producer).bindTo(registry);

同样适用于KafkaStreams：

new KafkaStreamsMetrics(kafkaStreams).bindTo(registry);

如果 Spring 不管理您的 Kafka 组件，您为什么期望 spring.jmx.enabled=true 做任何事情？