【发布时间】:2019-10-11 14:26:36
【问题描述】:
我有一个由 spark-shell 创建的 Spark 会话和另一个由我的代码创建的 Spark 会话。(通过传递给 spark-shell 的 jar 导入)
有没有办法比较两个 Spark Session 的 session id?
我知道我们可以通过 spark.SparkContext.applicationId 获取 applicationId。
sessionid 和 applicationId 一样吗?我认为 applicationId 与 spark 作业相关联。(作业的唯一标识符)
有什么方法可以获得 Spark Session id?
【问题讨论】: