【问题标题】:Notebooks are not executed in Spark on Docker笔记本不在 Docker 上的 Spark 中执行
【发布时间】:2023-01-09 12:50:59
【问题描述】:

我正在使用 Zeppelin 0.10.0 来运行 Spark 作业,我已经将它安装在 Docker 上,一旦我打开 Zeppelin 来运行 Notebooks,我就会收到以下错误。

org.apache.zeppelin.interpreter.InterpreterException: java.io.IOException: Fail to detect scala version,原因是:Cannot run program "null/bin/spark-submit": error=2, No such file or directory 在 org.apache.zeppelin.interpreter.remote.RemoteInterpreter.open(RemoteInterpreter.java:129) 在 org.apache.zeppelin.interpreter.remote.RemoteInterpreter.getFormType(RemoteInterpreter.java:271) 在 org.apache.zeppelin.notebook.Paragraph.jobRun(Paragraph.java:438) 在 org.apache.zeppelin.notebook.Paragraph.jobRun(Paragraph.java:69) 在 org.apache.zeppelin.scheduler.Job.run(Job.java:172)

【问题讨论】:

    标签: docker apache-zeppelin


    【解决方案1】:

    我刚刚在 0.10.1 上遇到了同样的问题。我目前的解决方法是降级到 0.9.0,这似乎与 0.10.1 没有相同的问题

    【讨论】:

      【解决方案2】:

      您可以尝试使用指定的环境变量 SPARK_HOME 启动 Zeppelin 容器,如 Play Spark in Zeppelin docker 中所述。

      【讨论】:

        猜你喜欢
        • 2018-02-13
        • 1970-01-01
        • 2021-06-14
        • 2021-05-17
        • 2017-12-01
        • 1970-01-01
        • 2021-05-09
        • 1970-01-01
        • 2018-04-03
        相关资源
        最近更新 更多