【问题标题】:Which protocol is Apache Zeppelin using to connect to Apache Spark? (iPython/ZeroMQ)?Apache Zeppelin 使用哪种协议连接到 Apache Spark? (iPython/ZeroMQ)?
【发布时间】:2015-11-15 14:19:26
【问题描述】:

我想知道 Apache Zeppelin 使用哪种协议连接到 Apache Spark?

它也是 ZeroMQ 上的 iPython 协议吗?

非常感谢!

最好的问候

罗密欧

【问题讨论】:

    标签: apache-spark ipython zeromq apache-zeppelin akka-zeromq


    【解决方案1】:

    Spark Interpreter for Apache Zeppelin(孵化)实际上都没有使用它们。

    它只是在 spark 解释器进程中托管 Spark 驱动程序,并通过 SparkIMain 为每个段落提交一个作业,与 spark-shell 的方式相同。

    我相信 Driver 和 Master 之间的内部低级通信基于 Akka,但它是 Spark 特定的实现细节。

    【讨论】:

    猜你喜欢
    • 2018-04-20
    • 2016-12-16
    • 2014-06-19
    • 2016-06-15
    • 2017-09-01
    • 2018-11-05
    • 2018-12-18
    • 2015-09-18
    • 2017-10-27
    相关资源
    最近更新 更多