【问题标题】:How to get job or application IDs from SparkSession?如何从 SparkSession 获取作业或应用程序 ID?
【发布时间】:2018-05-10 21:30:11
【问题描述】:

我知道如何从sparkContext 获取 jobID / ApplicationID。有没有办法从SparkSession 获取jobID / ApplicationID?

sparkContext,我们可以

sc.applicationId
res0: String = app-20150224184813-11531

【问题讨论】:

    标签: apache-spark apache-spark-sql


    【解决方案1】:

    解决办法是通过SparkSession访问SparkContext

    spark.sparkContext.applicationId
    res0: String = app-20150224184813-11531
    

    【讨论】:

      猜你喜欢
      • 2014-06-15
      • 1970-01-01
      • 2015-11-13
      • 1970-01-01
      • 1970-01-01
      • 2017-03-12
      • 1970-01-01
      • 1970-01-01
      • 2021-01-22
      相关资源
      最近更新 更多