【问题标题】:Connect R with Spark in Rstudio-Failed to launch Spark shell. Ports file does not exist在 Rstudio-Failed 中将 R 与 Spark 连接以启动 Spark shell。端口文件不存在
【发布时间】:2016-11-07 16:35:55
【问题描述】:

我正在尝试使用 Rstudio 将 R 与本地 Spark 实例连接起来。但是,我收到显示的错误消息。我错过了什么?我正在使用 Windows 10。我正在关注rstudio 上的教程。

  library(sparklyr)
  spark_install(version = "1.6.1")
  library(sparklyr)
  library(dplyr)
  sc <- spark_connect(master = "local")

我收到的错误消息:

     Error in start_shell(scon, list(), jars, packages) : 
     Failed to launch Spark shell. Ports file does not exist.
    Path: C:\Users\username\AppData\Local\rstudio\spark\Cache\spark-1.6.1-  bin-hadoop2.6\bin\spark-submit.cmd

 Parameters: --packages "com.databricks:spark-csv_2.11:1.3.0,com.amazonaws:aws-java-sdk-pom:1.10.34" --jars "C:\Users\user\Documents\R\win-library\3.3\sparklyr\java\rspark_utils.jar"   sparkr-shell C:\Users\aaaa\AppData\Local\Temp\Rtmpw9PBxS\filea5860886dd1.out

 'cmd' is not recognized as an internal or external command,
  operable program or batch file.

【问题讨论】:

    标签: r apache-spark rstudio sparkapi sparklyr


    【解决方案1】:

    将 C:\Windows\system32 添加到系统变量路径解决了它。之前,它仅被添加到用户变量路径中,这导致了错误消息。

    【讨论】:

      猜你喜欢
      • 2017-06-12
      • 1970-01-01
      • 2017-12-08
      • 2019-10-16
      • 2017-05-28
      • 1970-01-01
      • 2016-09-23
      • 1970-01-01
      • 1970-01-01
      相关资源
      最近更新 更多