【问题标题】:load-spark-env.sh, spark-submit: no such file or directoryload-spark-env.sh, spark-submit: 没有这样的文件或目录
【发布时间】:2021-04-22 08:52:24
【问题描述】:

我正在尝试使用以下 2 页上的说明在我的 iMac 上安装 apache-spark:

https://medium.com/macoclock/how-to-install-apache-pyspark-on-macbook-pro-4a9249f0d823

https://www.freecodecamp.org/news/installing-scala-and-apache-spark-on-mac-os-837ae57d283f/

在安装过程中,我无法运行

brew cask install java

所以我跑了

brew安装java

我想我设法安装了所有东西,包括 apache-spark。但是当我运行命令 spark-shell 或 pyspark 时,我一直遇到以下错误:

对于火花壳:

/usr/local/Cellar/apache-spark/3.0.1/libexec/bin/spark-shell:第 60 行:/usr/local/Cellar/apache-spark/2.0.1/libexecexport/bin/spark-提交:没有这样的文件或目录

对于 pyspark:

/usr/local/Cellar/apache-spark/3.0.1/libexec/bin/pyspark:第 24 行:/usr/local/Cellar/apache-spark/2.0.1/libexecexport/bin/load-spark- env.sh:没有这样的文件或目录 /usr/local/Cellar/apache-spark/3.0.1/libexec/bin/pyspark:第 68 行:/usr/local/Cellar/apache-spark/2.0.1/libexecexport/bin/spark-submit:没有这样的文件或目录 /usr/local/Cellar/apache-spark/3.0.1/libexec/bin/pyspark:第 68 行:执行:/usr/local/Cellar/apache-spark/2.0.1/libexecexport/bin/spark-submit:不能执行:没有这样的文件或目录

我的 iMac 运行的是 Big Sur 11.1 版。感谢任何帮助,谢谢。

【问题讨论】:

    标签: macos apache-spark pyspark


    【解决方案1】:

    原来我没有安装 JDK。安装JDK后问题解决。

    【讨论】:

      猜你喜欢
      • 2021-09-20
      • 2017-12-14
      • 1970-01-01
      • 2017-10-05
      • 2018-11-13
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2017-11-23
      相关资源
      最近更新 更多