Spark程序运行架构

1.Driver Application : Spark运行程序。

2.Cluster Manager:集群管理器。

3.Worker:工作节点。

4.Executor:执行器。

5.Task:任务。

注意:在Spark2.0之前版本,应用程序的入口为SparkContext,SqlContext和HiveContext,

    在Spark2.0之后统一使用SparkSession !

相关文章: