【问题标题】:Unresolved dependency in spark-streaming-kafka-0-8_2.12;2.4.4spark-streaming-kafka-0-8_2.12;2.4.4 中未解决的依赖关系
【发布时间】:2019-10-01 19:01:30
【问题描述】:

我使用 Spark 2.4.4 并且在添加 spark 时出现未解决的依赖错误,提交以下包:spark-streaming-kafka-0-8_2.12;2.4.4

我的提交代码:

./bin/spark-submit --packages org.apache.spark:spark-streaming-kafka-0-8_2.12:2.4.4

【问题讨论】:

    标签: apache-spark pyspark


    【解决方案1】:

    我在 spark 2.4.4 上遇到了同样的问题。我认为这是包的 Scala 版本中的错字。因此,请使用以下内容:

    --packages org.apache.spark:spark-streaming-kafka-0-8_2.11:2.4.4
    

    【讨论】:

      猜你喜欢
      • 2018-02-24
      • 2019-08-08
      • 2017-03-15
      • 2018-02-02
      • 2017-11-11
      • 2017-08-26
      • 1970-01-01
      • 2013-10-27
      • 1970-01-01
      相关资源
      最近更新 更多