我可以将 API 与 STORM 或 KAFKA 连接吗

Question

我正在做一个带有深度学习的汽车股票交易系统项目 我有股票市场的 API，想连接 Hadoop 集群 我可以将 API 与 KAFKA 或 STORM 连接起来吗？

Answer 1

希望你想像下面这样连接：

API

如果是，那么 Kafka 可以连接到 hadoop，您可以从 API 连接到 Kafka。 但是要连接到 Kafka，您需要通过 Zookeeper。在任何阶段都没有理由避免使用 zookeeper。您也可以在没有 zookeeper 的情况下进行连接，但如果它是您的沙箱，则必须进行一些修改。由于您应该在 prod 环境中运行它，因此您不能跳过 zookeeper，除非您的组织已决定这样做。