【发布时间】:2018-02-11 08:53:48
【问题描述】:
mesos 上的 spark 是否支持数据本地化?假设 mesos 代理在 datanode 上运行。
【问题讨论】:
-
Spark UI 告诉您任务的位置
标签: hadoop apache-spark mesos
mesos 上的 spark 是否支持数据本地化?假设 mesos 代理在 datanode 上运行。
【问题讨论】:
标签: hadoop apache-spark mesos
数据局部性支持根本不依赖于集群管理器。它仅取决于数据的来源。因此,如果您谈论 HDFS 数据节点,那么答案是肯定的——它确实支持数据局部性。
【讨论】: