使用 Docker 设置 kafka 和 zooker 进行开发

Question

我正在尝试设置 Kafka 和 zookeeper 以进行开发，我正在关注this tutorial：

version: "3"
services:
  zookeeper:
    image: 'bitnami/zookeeper:latest'
    ports:
      - '2181:2181'
    environment:
      - ALLOW_ANONYMOUS_LOGIN=yes
  kafka-src:
    image: 'bitnami/kafka:latest'
    ports:
      - '9092:9092'
    environment:
      - KAFKA_BROKER_ID=1
      - KAFKA_LISTENERS=PLAINTEXT://:9092
      - KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://127.0.0.1:9092
      - KAFKA_ZOOKEEPER_CONNECT=zookeeper:2181
      - ALLOW_PLAINTEXT_LISTENER=yes
    depends_on:
      - zookeeper
  kafka-dst:
    image: 'bitnami/kafka:latest'
    ports:
      - '9093:9093'
    environment:
      - KAFKA_BROKER_ID=2
      - KAFKA_LISTENERS=PLAINTEXT://:9093
      - KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://127.0.0.1:9093
      - KAFKA_ZOOKEEPER_CONNECT=zookeeper:2181
      - ALLOW_PLAINTEXT_LISTENER=yes
    depends_on:
      - zookeeper

但是当我执行docker-compose up 时，我收到了错误Connection to node 2 (/127.0.0.1:9093) could not be established. Broker may not be available. (org.apache.kafka.clients.NetworkClient)

我的总体目标是能够为开发环境设置 kafka。

谢谢

Answer 1

似乎在重命名变量时，README 的那部分没有更新（我不知道他们为什么这样做）

变量现在以KAFKA_CFG 开头，如页面的其他部分所示，这可能解释了为什么您从默认值覆盖的侦听器属性不起作用。

This section 我写的是正确的

注意，repo 中已经有一个集群文件 - https://github.com/bitnami/bitnami-docker-kafka/blob/master/docker-compose-cluster.yml

但是，单台机器是单点故障，因此在一个组合文件中包含两个代理不会有助于提高弹性或吞吐量。特别是因为您尚未将内部主题配置为具有超过 1 的默认复制因子

Answer 2

我认为 zookeeper 找不到 kafka 和 kafka 找不到 zookeeper 因为 localHost 名称冲突 如果使用这种方式使用 Ubuntu OS？如果 Ubuntu 我认为您需要从 /etc/hosts 更改设置主机

看这个链接http://manpages.ubuntu.com/manpages/bionic/man5/hosts.5.html

这就是灵魂

[your ip Address] [local Host]
140...1           localhost
140...1           abed-Inspiron-5593
140...1           release.gitkraken.com
140...1           mysql
140...1           eurekaserver
140...1           keycloak
140...1           kafka
140...1           zookeeper