在 kafka 上的单个消费者中消费多个主题

Question

kafka 有什么办法可以在单个消费者上使用多个主题？

这是我的消费者代码，它适用于单个主题

let consumer = new Consumer(
        client,
        [{ topic: '1234', offset: 0, partition: 0 }],
        {
            autoCommit: true,
            fetchMaxWaitMs: 1000,
            fetchMaxBytes: 1024 * 1024,
            encoding: 'utf8',
            fromOffset: false
        }
    );
    consumer.on('message', async function (message: any) {
        console.log(
            'kafka-> ',
            message.value
        );
    })

Answer 1

明明是一个列表，你应该可以在消费者中添加多个主题。

https://www.npmjs.com/package/kafka-node#consumer 说你可以做如下。 （最好不要分配分区，让zookeeper来处理）

var kafka = require('kafka-node'),
Consumer = kafka.Consumer,
client = new kafka.KafkaClient(),
consumer = new Consumer(
    client,
    [
        { topic: 't', partition: 0 }, { topic: 't1', partition: 1 }
    ],
    {
        autoCommit: false
    }
);