【发布时间】:2021-02-01 21:55:44
【问题描述】:
目前,我正在使用 Confluent Rest Proxy 5.5.1 来收集生产中的数据。可能会出现重复的事件。我找到了使用 Kafka Stream API 进行重复数据删除的解决方案。在 Rest Proxy 中是否可以得到幂等生产者保证?
【问题讨论】:
标签: apache-kafka kafka-rest confluent-rest-proxy
目前,我正在使用 Confluent Rest Proxy 5.5.1 来收集生产中的数据。可能会出现重复的事件。我找到了使用 Kafka Stream API 进行重复数据删除的解决方案。在 Rest Proxy 中是否可以得到幂等生产者保证?
【问题讨论】:
标签: apache-kafka kafka-rest confluent-rest-proxy
您可以使用 producer. 前缀修改 REST 代理的生产者客户端
producer.enable.idempotence=true
【讨论】: