【发布时间】:2020-07-06 01:10:32
【问题描述】:
我是卡夫卡的新手。我的任务是发送具有优化吞吐量和延迟的 2kb 消息。我真的不知道如何对这两个指标进行基准测试并设置我的集群。我没有任何集群监控工具可以使用,但在我启动生产者和消费者时查看终端上的统计信息。谁能帮我在数据流进行时使用哪个脚本来查看消费者端的相关统计信息?
【问题讨论】:
标签: apache-kafka kafka-consumer-api
我是卡夫卡的新手。我的任务是发送具有优化吞吐量和延迟的 2kb 消息。我真的不知道如何对这两个指标进行基准测试并设置我的集群。我没有任何集群监控工具可以使用,但在我启动生产者和消费者时查看终端上的统计信息。谁能帮我在数据流进行时使用哪个脚本来查看消费者端的相关统计信息?
【问题讨论】:
标签: apache-kafka kafka-consumer-api
确保检查 Apache Kafka 安装(bin/ 目录)附带的命令行工具。其中包括 kafka-producer-perf-test.sh 和 kafka-consumer-perf-test,它们可以帮助您测试集群性能。
这篇文章包括很好的例子:https://community.cloudera.com/t5/Community-Articles/Kafka-2-3-Performance-testing/ta-p/284767
【讨论】: