Spark Structured Streaming 中 Streaming Dataframe 和 Batch Dataframe 的联合

【问题标题】：Union of Streaming Dataframe and Batch Dataframe in Spark Structured StreamingSpark Structured Streaming 中 Streaming Dataframe 和 Batch Dataframe 的联合
【发布时间】：2017-09-21 06:15:07
【问题描述】：

如何在 Spark Structured Streaming 中将流数据帧和批处理数据帧组合在一起？

【问题讨论】：

“join”中的“combine”，或“union”中的“combine”？

标签： apache-spark spark-structured-streaming

【解决方案1】：

你可以正常加入：

val stream = spark.readStream(....)
val batch = spark.read....

val joinSandB = stream.join(batch, "someColumn")

在documentation中查看更多信息

【讨论】：