【问题标题】:Push data from Clickhouse to Kafka从 Clickhouse 推送数据到 Kafka
【发布时间】:2019-05-27 10:46:12
【问题描述】:

出于测试目的,我必须将数据从 Clickhouse 服务器推送到 Kafka。我已经尝试过使用 Confluent JDBC 连接器,但这并不能很好地工作。

似乎 Clickhouse-Kafka-Engine 仅在 Kafka -> Clickhouse 方向上工作,因此 Clickhouse-server 作为消费者工作。

有没有一种方便的方式来使用 Clickhouse 中的表格作为制作人,还是我自己编写制作人?

【问题讨论】:

    标签: apache-kafka confluent-platform clickhouse


    【解决方案1】:

    我建议在 ClickHouse 之外卸载此类任务。您可以通过 clickhouse-client 转储测试数据,并通过 shell 将其传输到 kafka 客户端。看看这个https://github.com/fgeller/kt

    【讨论】:

      猜你喜欢
      • 2017-02-07
      • 1970-01-01
      • 2020-03-10
      • 2021-04-08
      • 2018-06-12
      • 1970-01-01
      • 1970-01-01
      • 2022-12-02
      • 1970-01-01
      相关资源
      最近更新 更多