将日志文件 kafka 移动到 hadoop

【问题标题】：Moving log file kafka to hadoop将日志文件 kafka 移动到 hadoop
【发布时间】：2017-11-15 03:05:23
【问题描述】：

我想将日志文件从 kafka 移动到 hdfs 文件系统。此过程使用哪些工具？我尝试了 Confluent，但我无法通过 Confluent 成功完成这个过程。我试图找到另一个工具。

【问题讨论】：

【解决方案1】：

我想将日志文件从 kafka 移动到 hdfs 文件系统。这个过程使用了哪些工具

HDFS connector for Kafka Connect 运行良好，并被广泛使用并取得了巨大成功。

我无法通过 confluent 成功完成此过程

如果您描述您所面临的实际问题，这可能是最好的。如果您在使用一种经过验证的技术时遇到问题，那么切换到另一种不一定会对您有太大帮助。

【讨论】：