【发布时间】:2017-03-22 14:35:06
【问题描述】:
我知道,在 spark 应用程序启动时,驱动程序进程会在工作节点上启动执行程序进程。但它究竟是如何做到的(以 spark 源代码的低级术语)?
哪些 spark 类/方法实现了该功能?有人可以指点我这些课程吗?
【问题讨论】:
标签: apache-spark pyspark apache-spark-2.0
我知道,在 spark 应用程序启动时,驱动程序进程会在工作节点上启动执行程序进程。但它究竟是如何做到的(以 spark 源代码的低级术语)?
哪些 spark 类/方法实现了该功能?有人可以指点我这些课程吗?
【问题讨论】:
标签: apache-spark pyspark apache-spark-2.0
看这两个类:StandaloneAppClient 和StandaloneSchedulerBackend
希望对你有帮助
【讨论】: