是否可以仅使用 Kafka 连接器 API 将数据从云端传输到本地？ [关闭]

Question

我想从云应用程序流式传输数据，该应用程序将使用生产者将日志发布到 Kafka 主题，然后将此数据发送到 HBase on-prem。我怀疑 HBase 连接器接收器 是否支持将数据直接发送到我的本地环境 而不在其上安装 Kafka。

Answer 1

Kafka Connect 是一个独立于 Kafka 代理的进程。无论如何，您通常不会将其安装在同一台机器上。您需要在某个地方拥有 Kafka 集群，但无论是在本地还是在云中，通过适当的安全配置（防火墙等），您的 Kafka Connect 工作人员将能够连接到 Kafka 代理以及您的 HBase 实例。