【发布时间】:2016-06-29 17:54:49
【问题描述】:
在 Kafka Streams 中,产生/写入流的规范方式是什么?在 Spark 中,有一个自定义接收器,它作为来自任意数据源的长时间运行的适配器。 Kafka Streams 中的等价物是什么?
具体来说,我不是在问如何从一个主题转换到另一个主题。文档对此非常清楚。我想了解如何编写我的工人,这些工人将在一系列转换到 Kafka 中进行第一次写入。
我希望能够做到
builder1.<something>(<some intake worker like a spark reciver)
.to(topic1)
.start()
builder2.from(topic1)
.transform(<some transformation function>)
.to(topic2)
.start()
但是现有的文档都没有显示这一点?我错过了什么吗?
【问题讨论】:
标签: apache-kafka apache-kafka-streams