【发布时间】：2023-01-24 19:00:48
【问题描述】：
我必须制作用于将 HIVE 连接到 MYSQL 的 Kafka 源和接收器连接器。
我找不到关于上述问题的任何信息。我也看过融合网站。
【问题讨论】：
标签： mysql apache-kafka hive apache-kafka-connect s3-kafka-connector
【发布时间】：2023-01-24 19:00:48
【问题描述】：
使用 Kafka 连接器将 Hive 连接到 MySQL 需要设置一个 Kafka 源连接器以从 Hive 读取数据和一个 Kafka 接收器连接器以将数据写入 MySQL。以下是执行此操作的一般步骤：
- 安装和配置 Kafka 集群。
- 安装和配置 Confluent Platform，包括 Kafka Connect 框架。
- 安装和配置 Confluent Hive 连接器，它提供从 Hive 读取数据所需的连接器。
- 安装和配置 Confluent JDBC 连接器，它提供了将数据写入 MySQL 所需的连接器。
- 创建一个 Kafka 源连接器以从 Hive 读取数据，指定必要的配置选项，例如 Hive 服务器和表名。
- 创建一个 Kafka 接收器连接器以将数据写入 MySQL，指定必要的配置选项，例如 MySQL 服务器、数据库和表名。
- 启动 Kafka 源连接器和接收器连接器，这将开始从 Hive 读取数据并将其写入 MySQL。 请务必注意，上述步骤只是一般概述，需要更详细的配置选项。此外，您可能需要检查 Hive、MySQL、Kafka 和 Confluent 版本的兼容性。
【讨论】：