设置 kafka-connect 从远程代理获取数据答案

【问题标题】：Setup kafka-connect to fetch data from remote brokers设置 kafka-connect 从远程代理获取数据
【发布时间】：2017-11-11 08:59:48
【问题描述】：

我正在尝试设置 Kafka 连接接收器连接器。 Kafka connect 是 Kafka connect worker (confluent-3.2.0) 的一部分。我在机器 A 上启动并运行了一个 Kafka 代理（confluent-3.2.0）。我想在另一台机器 B 上设置 Kafka-connect-sink 连接器以使用自定义的 Kafka-connect-sink 连接器 jar 来使用消息。假设机器 A 上的 Kafka broker 和 Zoo keeper 端口对机器 B 开放。

那么我是否应该通过将类路径设置为 Kafka-connect-sink 连接器 jar 并运行以下命令，在机器 B 上安装/设置 confluent-3.2.0（因为 Kafka Connect 是 Kafka 包的一部分）？

./bin/connect-distributed.sh worker.properties

【问题讨论】：

标签： apache-kafka remote-server apache-kafka-connect

【解决方案1】：

是的。您所描述的将起作用，并且是设置此系统的最简单方法，即使在机器 B 上您实际上只需要启动脚本、配置属性文件、Kafka Connect 的 jar 和自定义连接器的 jar。

【讨论】：