错误：未找到：值 sc

Question

我是 Scala 新手，我正在尝试使用以下代码编写代码读取文件

scala> val textFile = sc.textFile("README.md")
scala> textFile.count()

但我不断收到以下错误

error: not found: value sc

我已经尝试了所有方法，但似乎没有任何效果。我正在使用 Scala 版本 2.10.4 和 Spark 1.1.0（我什至尝试过 Spark 1.2.0，但它也不起作用）。我已经安装并编译了 sbt，但无法运行 sbt/sbt assembly。是不是因为这个而报错？

Answer 1

您应该使用./spark-shell 运行此代码。它是带有 sparkContext 的 scala repl。您可以在文件夹 spark-1.4.1/bin 的 apache spark 发行版中找到它。