1、Spark运行架构
2、在spark中,一个应用由一个任务控制节点(Driver)和若干个作业(Job)组成,一个作业由多个阶段(stage)构成,一个阶段由多个任务组成(Task).
3、当执行一个应用时,任务控制节点会向集群管理器(cluster Manager)申请资源,启动exector,并向Executor发送应用程序代码和文件,然后在exector上执行task.
4.spark Streaming工作原理
欲了解更多spark Streaming的内容,请扫描关注下方公众号: