【发布时间】:2016-01-15 16:59:53
【问题描述】:
我的应用程序在 Spark UI 中的工作持续时间如下: Job Duration in Spark UI
这是 Spark UI 中的批处理时间: Batch Processing Time in Spark UI
请注意,批处理时间通常比作业持续时间长。那么,它们之间有什么区别呢?
【问题讨论】:
标签: apache-spark spark-streaming
我的应用程序在 Spark UI 中的工作持续时间如下: Job Duration in Spark UI
这是 Spark UI 中的批处理时间: Batch Processing Time in Spark UI
请注意,批处理时间通常比作业持续时间长。那么,它们之间有什么区别呢?
【问题讨论】:
标签: apache-spark spark-streaming
Spark 一起处理所有作业,以更好地利用 CPU 时间。这就是批处理时间比作业处理时间长的原因。
【讨论】: