Kafka S3 Sink基本疑惑

Question

我真的需要使用 confluent（也许是 CLI）吗？我可以编写自定义连接器吗？
如何编写我的第一个 Kafka Sink？如何部署它们？

现在，假设我们有以下详细信息：

Topic: curious.topic
S3 bucket name: curious.s3
Data in the topic: Text/String
My OS: Mac

Answer 1

您 start at the documentation 用于 S3 Sink，查看配置属性，并了解如何 run Connect itself 和部署任何连接器（使用 REST API）；不，永远不需要 confluent CLI。

您不需要“编写自己的接收器”，因为 Confluent 已经有一个 S3 接收器连接器。当然，您可以分叉他们的开源存储库，然后自己编译，但这似乎不是您要问的。

您可以使用不同的命令confluent-hub 下载连接器。

注意：pinterest/secor 做同样的事情，没有 Kafka Connect。