【问题标题】:Kafka file transfer from ms sql server to s3 bucket?Kafka 文件从 ms sql 服务器传输到 s3 存储桶?
【发布时间】:2020-08-31 17:54:08
【问题描述】:

我需要将 SQL Server 中的文件传输到 Minio。 当文件写入 MS SQL Server 中的表时,我想通过 Kafka s3 连接器将其写入/传输到 Minio 存储桶。 可以通过 Kafka 实现吗?

【问题讨论】:

    标签: sql-server apache-kafka apache-kafka-connect minio


    【解决方案1】:

    是的,这是可能的。

    1. 使用 Kafka Connect 从 MS SQL 提取数据(例如 JDBC Source connectorDebeziumother options
    2. 通过 S3 接收器连接器将数据流式传输到 Minion。 This blog 表明它是兼容的。有关连接器的示例,请参阅 this video

    有关 Kafka Connect 的一般了解,请参阅this talk

    【讨论】:

      猜你喜欢
      • 2019-09-13
      • 2013-06-25
      • 2023-01-22
      • 2019-10-23
      • 1970-01-01
      • 2021-05-10
      • 2018-06-02
      • 2018-06-02
      • 2022-01-17
      相关资源
      最近更新 更多