德鲁伊调整配置

Question

iam 初学者使用 druid 和 kafka。

我想创建交互式数据实时 kafka-druid。我仍然困惑我应该更改此配置的哪些调整？

提前致谢

Answer 1

这取决于：

• 关于你的 kafka 消息的大小
• 关于生产者的容量和向 Kafka 生成消息的速率
• 在 Kafka 的服务器上、分区和许多其他因素。
• 在您的 druid 部署模型（单个或集群）上
• 和....

但是我在这里看到的最重要的东西是你的任务数，这意味着并行处理的数量（因为你的是 Kafka，所以它意味着并行消费者）。增加它并确保您的 Druid 主机（如果是集群，则为中间管理器主机）具有足够的核心来完成您的任务。并确保您的中层经理增加了可用任务的总数： druid.worker.capacity