假设我运行pyspark 命令并获得SparkSession 类型的全局变量spark。据我了解，这个spark 拥有与 Spark 主服务器的连接。我可以打印出此连接的详细信息，包括此 Spark 主服务器的主机名吗？
【问题讨论】：
spark.sparkContext.master 将是一个好的开始。您需要为 local 和 YARN 提供一些额外的逻辑来获取实际主机。
spark.sparkContext.master 在我的情况下是yarn。你如何获得主主机名？
标签： apache-spark pyspark
基本信息可以使用master属性：
spark.sparkContext.master
要获取有关 YARN 的详细信息，您可能需要深入了解hadoopConfiguration：
hadoopConfiguration = spark.sparkContext._jsc.hadoopConfiguration()
hadoopConfiguration.get("yarn.resourcemanager.hostname")
或
hadoopConfiguration.get("yarn.resourcemanager.address")
当提交到 YARN 时，Spark 使用 Hadoop 配置来确定资源管理器，因此这些值应该与 HADOOP_CONF_DIR 或 YARN_CONF_DIR 中的配置中的值匹配。
【讨论】：
"yarn.resourcemanager.hostname" 是0.0.0.0 是什么意思？