【发布时间】:2017-06-03 06:50:48
【问题描述】:
有一个question on this topic,答案是“一旦消息持久保存在数据流管道中的某个地方,就会做出确认。”。
从概念上讲,这是有道理的,但我不确定 Dataflow 如何能够在消息被反序列化并在管道中转换之后,在其有效负载被持久化之前对其进行跟踪。
在我们的例子中,PubSub 消息包含一批项目。在收到消息并反序列化后,我们将批处理进行分解。最终,批处理中的某个项目可能会被丢弃或提交到 Datastore,具体取决于其时间戳。
确认在这种情况下如何工作?
【问题讨论】: