在 Windows 中从 ubuntu wsl 运行 pyspark，错误：找不到 cmd

Question

我在 windows 10 的 ubuntu wsl 中安装 pyspark。这些是我从 Microsoft Store 安装 wsl 后使用的命令。

#install Java runtime environment (JRE)
sudo apt-get install openjdk-8-jre-headless
export JAVA_HOME=/usr/lib/jvm/java-1.8.0-openjdk-amd64/jre
#download spark, visit https://spark.apache.org/downloads.html if you want a different version
wget https://apache.osuosl.org/spark/spark-2.4.7/spark-2.4.7-bin-hadoop2.7.tgz
#untar and set a symlink
sudo tar -xvzf spark-2.4.7-bin-hadoop2.7.tgz -C /opt
sudo ln -s spark-2.4.7-bin-hadoop2.7 /opt/spark
ln -s /usr/bin/python3.8.5 python
/opt/spark/bin/pyspark

错误：

---

/mnt/c/Users/akash/.pyenv/pyenv-win/bin/pyenv: 3: cmd: not found
/mnt/c/Users/akash/.pyenv/pyenv-win/bin/pyenv: 3: cmd: not found

我无法理解为什么它在 C 盘中查找。如何解决这个问题？任何帮助表示赞赏。

Answer 1

尝试将解压后的目录 spark-3.0.1-bin-hadoop2.7 移动到 opt/spark 目录，而不是创建符号链接：

sudo mv spark-3.0.1-bin-hadoop2.7 /opt/spark

另外，请选择最新版本，即 Spark 3.0.1 和 Hadoop 2.7。

您可以通过此在线阅读article 了解更多详情。