【发布时间】:2019-10-01 19:01:30
【问题描述】:
我使用 Spark 2.4.4 并且在添加 spark 时出现未解决的依赖错误,提交以下包:spark-streaming-kafka-0-8_2.12;2.4.4
我的提交代码:
./bin/spark-submit --packages org.apache.spark:spark-streaming-kafka-0-8_2.12:2.4.4
【问题讨论】:
标签: apache-spark pyspark
我使用 Spark 2.4.4 并且在添加 spark 时出现未解决的依赖错误,提交以下包:spark-streaming-kafka-0-8_2.12;2.4.4
我的提交代码:
./bin/spark-submit --packages org.apache.spark:spark-streaming-kafka-0-8_2.12:2.4.4
【问题讨论】:
标签: apache-spark pyspark
我在 spark 2.4.4 上遇到了同样的问题。我认为这是包的 Scala 版本中的错字。因此,请使用以下内容:
--packages org.apache.spark:spark-streaming-kafka-0-8_2.11:2.4.4
【讨论】: