有没有办法将 Kafka 消息从一台服务器上的主题转发到另一台服务器上的主题？

Question

我有一个场景，我们使用 fluentD 代理将应用程序日志转发到 Kafka 主题， 由于 Kafka 团队引入了 Kerberos 身份验证和不支持此身份验证的 fluentD 版本，我无法直接使用转发日志。 现在我们已经引入了一个没有身份验证的新 Kafka 服务器并在那里创建了一个主题，我想使用 Kafka 连接器将新服务器中这个主题的消息转发到另一个服务器中的另一个主题， 想知道我怎样才能做到这一点？

Answer 1

有几种不同的工具可让您将消息从一个集群上的 Kafka 主题流式传输到另一个集群，包括：

• MirrorMaker（开源，Apache Kafka 的一部分）
• Confluent 的Replicator（商业工具，30 天免费试用）
• uReplicator（来自优步的open sourced）
• Mirus（来自 Salesforce 的open sourced）
• Brucke（开源）

免责声明：我为 Confluent 工作。