如何将数据从 Kafka 加载到 CrateDB？

Question

从 CrateDB GitHub 页面上的以下问题看来，这是不可能的，即 CrateDB 不支持 Kafka 协议。 https://github.com/crate/crate/issues/7459

还有其他方法可以将数据从 Kafka 加载到 CrateDB 中吗？

Answer 1

通常您会使用 Kafka Connect 将 Kafka 集成到目标（和源）系统，并为目标技术使用适当的连接器。

我找不到用于 CrateDB 的 Kafka Connect 连接器，但有一个用于 Kafka Connect 的 JDBC sink connector 和一个 JDBC driver for CrateDB，所以这可能值得一试。

您可以阅读有关Kafka Connect here 的更多信息，并在此博客系列中看到它的实际效果：

• https://www.confluent.io/blog/simplest-useful-kafka-connect-data-pipeline-world-thereabouts-part-1/
• https://www.confluent.io/blog/blogthe-simplest-useful-kafka-connect-data-pipeline-in-the-world-or-thereabouts-part-2/
• https://www.confluent.io/blog/simplest-useful-kafka-connect-data-pipeline-world-thereabouts-part-3/

免责声明：我为 Confluent 工作，并撰写了上述博客文章。