【发布时间】:2020-08-17 05:41:49
【问题描述】:
spark 有很多结构:
- 应用
- 司机
- 执行者
- 工作节点
- 分区
- 数据帧/rdd
- 随机播放
- 工作
- 舞台
- 任务
- 输入文件
- 输出文件
- 核心
有没有图表显示它们之间的关系?
即
每个工作节点可以有 0 多个执行者。至少 1 名工人应该至少有 1 名执行者。但是有些工人可能没有执行者
任务分区是一对多
执行者到核心是一对多 ..等
【问题讨论】:
标签: apache-spark
spark 有很多结构:
有没有图表显示它们之间的关系?
即
每个工作节点可以有 0 多个执行者。至少 1 名工人应该至少有 1 名执行者。但是有些工人可能没有执行者
任务分区是一对多
执行者到核心是一对多 ..等
【问题讨论】:
标签: apache-spark
【讨论】: