【发布时间】:2015-11-15 14:19:26
【问题描述】:
我想知道 Apache Zeppelin 使用哪种协议连接到 Apache Spark?
它也是 ZeroMQ 上的 iPython 协议吗?
非常感谢!
最好的问候
罗密欧
【问题讨论】:
标签: apache-spark ipython zeromq apache-zeppelin akka-zeromq
我想知道 Apache Zeppelin 使用哪种协议连接到 Apache Spark?
它也是 ZeroMQ 上的 iPython 协议吗?
非常感谢!
最好的问候
罗密欧
【问题讨论】:
标签: apache-spark ipython zeromq apache-zeppelin akka-zeromq
Spark Interpreter for Apache Zeppelin(孵化)实际上都没有使用它们。
它只是在 spark 解释器进程中托管 Spark 驱动程序,并通过 SparkIMain 为每个段落提交一个作业,与 spark-shell 的方式相同。
我相信 Driver 和 Master 之间的内部低级通信基于 Akka,但它是 Spark 特定的实现细节。
【讨论】: