【问题标题】:Is it possible to run MirrorMaker in Kafka without using Kafka Connect?是否可以在不使用 Kafka Connect 的情况下在 Kafka 中运行 MirrorMaker?
【发布时间】:2021-08-06 21:47:33
【问题描述】:

希望提出一种无需 Kafka Connect 即可镜像或复制一个 Kafka 环境的解决方案。很难想出任何可能的解决方案或变通方法。对 Kafka 非常陌生,如果有任何想法和/或指导,将不胜感激!

【问题讨论】:

  • 嗨@Sarah,如果你能让我们知道在使用 Kafka Connect 时遇到了什么问题,我们可能会更好地解决这个问题。或者,您也可以使用uReplicator

标签: apache-kafka apache-kafka-connect apache-kafka-mirrormaker


【解决方案1】:

MirrorMaker2 基于 Kafka Connect。原来的 MirrorMaker 不是,但不建议再使用它,因为它的容错性不是很好。

大部分 Kafka 复制解决方案都是基于 Kafka Connect 构建的(以 Confluent Replicator 为例)

cmets 中提到的 Uber uReplicator 是基于 Apache Helix 构建的,需要 Zookeeper 连接,而 Kafka Connect 不需要,因此最终取决于您有哪些可用的访问权限和基础设施

由于 Kafka 预装了 Connect API 和 MirrorMaker2,因此应该没有什么理由去寻找替代品,除非它绝对不适合您的用例(这是……?)

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 2022-06-16
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2021-06-24
    • 2019-10-20
    • 2017-07-23
    • 2017-04-30
    相关资源
    最近更新 更多