【问题标题】:Spark not booting up form home directorySpark没有从主目录启动
【发布时间】:2016-12-15 13:15:16
【问题描述】:

我在我的主目录上安装了 spark 并在 bash 文件中给出了路径。现在 Spark 在使用“Spark-shell”调用时不会启动

bashrc

export SCALA_HOME=/home/spark/scala-2.12.1
export PATH=$SCALA_HOME/bin:$PATH
export SPARK_HOME=/home/spark/spark/
export PATH=$SPARK_HOME/bin:$PATH
export PYTHONPATH=$SPARK_HOME/python/:$PYTHONPATH
export PYTHONPATH=$SPARK_HOME/python/lib/py4j-0.10.1-src.zip:$PYTHONPATH

错误

spark@sE3:~/spark-2.0.2-bin-hadoop2.7/bin$ ./spark-shell ./spark-shell: line 57: /home/spark/spark//bin/spark-submit: 没有这样的文件或目录

【问题讨论】:

  • 错误抛出:spark@sE3:~/spark-2.0.2-bin-hadoop2.7/bin$ ./spark-shell ./spark-shell: line 57: /home/spark/ spark//bin/spark-submit: 没有这样的文件或目录

标签: apache-spark


【解决方案1】:

请验证/home/spark/spark/bin/ 是否是正确的文件夹。因为spark/spark/是2次

还可以与下面的交叉检查..

readlink -f spark-submit

如果你有符号链接,会给你正确的 sparkhome,

你也可以使用

SPARK_HOME="$(cd "`dirname $(readlink -nf "$0")`"/.. ; pwd -P)"

【讨论】:

    猜你喜欢
    • 2016-02-17
    • 2014-01-04
    • 1970-01-01
    • 2015-11-25
    • 2023-03-21
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多