【问题标题】:Zeppelin - Spark 1.6 issues with dependenciesZeppelin - Spark 1.6 的依赖问题
【发布时间】:2016-06-25 08:17:08
【问题描述】:

最近,依赖项已从工作表迁移到解释器,如下图所示:

不幸的是,当按照以下方式应用依赖项时:

调用spark上下文时产生的错误:

或另一个java.lang.NoSuchMethodError: com.fasterxml.jackson.module.scala.deser.BigDecimalDeserializer$.handledType()Ljava/lang/Class

有人知道怎么解决吗? 我删除了杰克逊库而没有任何结果:

rm -f zeppelin-server/target/lib/jackson-*
rm -f zeppelin-zengine/target/lib/jackson-*

并尝试将 com.fasterxml.jackson.core 上传到依赖项中的工件中,但这在 https://repo1.maven.org/maven2/ 中不存在

【问题讨论】:

    标签: apache-spark apache-zeppelin


    【解决方案1】:

    我能够将依赖项输入到 /usr/local/zeppelin/conf/zeppelin-env.sh

    export JAVA_HOME=/usr
    

    导出 MASTER=local[*]

    导出 ZEPPELIN_PORT=8081

    export SPARK_SUBMIT_OPTIONS="--packages com.databricks:spark-csv_2.10:1.2.0"

    效果很好

    【讨论】:

      猜你喜欢
      • 2019-08-12
      • 2016-08-22
      • 1970-01-01
      • 2015-03-10
      • 2021-10-24
      • 2022-01-05
      • 2015-11-30
      • 1970-01-01
      • 1970-01-01
      相关资源
      最近更新 更多