Spark-submit 失败，返回码为 13，例如 wordCount答案

【问题标题】：Spark-submit fails with return code 13 for example of wordCountSpark-submit 失败，返回码为 13，例如 wordCount
【发布时间】：2021-01-27 00:31:15
【问题描述】：

我的 spark-submit 命令是：

spark-submit --class com.sundogsoftware.spark.WordCountBetterDataset --master yarn --deploy-mode cluster SparkCourse.jar

为了定义 sparkSession，我使用这个：

val spark = SparkSession
  .builder
  .master("spark://youness:7077")
  .appName("WordCount")
  .getOrCreate()

但最后，我的工作失败并返回代码 13。

【问题讨论】：

标签： apache-spark hadoop hadoop-yarn spark-submit

【解决方案1】：

您需要在代码中取消设置master。最好稍后在您发出spark-submit (spark-submit --master yarn-client ...) 时设置它，并且您已经在上面这样做了。只需从您的代码中删除 .master("spark://youness:7077")。

【讨论】：