【发布时间】:2021-04-22 08:52:24
【问题描述】:
我正在尝试使用以下 2 页上的说明在我的 iMac 上安装 apache-spark:
https://medium.com/macoclock/how-to-install-apache-pyspark-on-macbook-pro-4a9249f0d823
https://www.freecodecamp.org/news/installing-scala-and-apache-spark-on-mac-os-837ae57d283f/
在安装过程中,我无法运行
brew cask install java
所以我跑了
brew安装java
我想我设法安装了所有东西,包括 apache-spark。但是当我运行命令 spark-shell 或 pyspark 时,我一直遇到以下错误:
对于火花壳:
/usr/local/Cellar/apache-spark/3.0.1/libexec/bin/spark-shell:第 60 行:/usr/local/Cellar/apache-spark/2.0.1/libexecexport/bin/spark-提交:没有这样的文件或目录
对于 pyspark:
/usr/local/Cellar/apache-spark/3.0.1/libexec/bin/pyspark:第 24 行:/usr/local/Cellar/apache-spark/2.0.1/libexecexport/bin/load-spark- env.sh:没有这样的文件或目录 /usr/local/Cellar/apache-spark/3.0.1/libexec/bin/pyspark:第 68 行:/usr/local/Cellar/apache-spark/2.0.1/libexecexport/bin/spark-submit:没有这样的文件或目录 /usr/local/Cellar/apache-spark/3.0.1/libexec/bin/pyspark:第 68 行:执行:/usr/local/Cellar/apache-spark/2.0.1/libexecexport/bin/spark-submit:不能执行:没有这样的文件或目录
我的 iMac 运行的是 Big Sur 11.1 版。感谢任何帮助,谢谢。
【问题讨论】:
标签: macos apache-spark pyspark