【问题标题】:How to setup and use Kafka-Connect-HDFS in HDP 2.4如何在 HDP 2.4 中设置和使用 Kafka-Connect-HDFS
【发布时间】:2017-02-07 23:52:23
【问题描述】:

我想在 hortonworks 2.4 上使用 kafka-connect-hdfs。您能帮我完成在 HDP 环境中设置所需的步骤吗?

【问题讨论】:

    标签: hdfs apache-kafka hortonworks-data-platform apache-kafka-connect


    【解决方案1】:

    除了从源代码构建 Kafka Connect HDFS 之外,您还可以在 Hadoop 节点上下载并提取 Confluent Platform 的 TAR.GZ 文件。这并不意味着您正在“安装 Confluent”

    那你可以cd /path/to/confluent-x.y.z/

    然后从那里运行 Kafka Connect。

    ./bin/connect-standalone ./etc/kafka/connect-standalone.properties ./etc/kafka-connect-hdfs/quickstart-hdfs.properties
    

    如果这对您有用,那么为了运行 connect-distributed(运行 Kafka Connect 的推荐方式),您需要在要运行 Kafka Connect 的其他机器上下载相同的内容。

    【讨论】:

    • 您好,我已经通过运行 kafka connect 尝试了您的建议。并且发生了错误。你介意看看这里吗:stackoverflow.com/questions/62526864/…。非常感谢
    • 这个答案不使用Hdfs3SinkConnector
    猜你喜欢
    • 2017-03-22
    • 1970-01-01
    • 2016-12-02
    • 1970-01-01
    • 2017-03-24
    • 1970-01-01
    • 2016-12-01
    • 2018-10-08
    • 2018-09-25
    相关资源
    最近更新 更多