apache-kafka - 如何将数据从 Kafka 加载到 CrateDB？

Question

从 CrateDB GitHub 页面上的以下问题来看，这似乎是不可能的，即 CrateDB 不支持 Kafka 协议。 https://github.com/crate/crate/issues/7459

还有另一种方法可以将数据从 Kafka 加载到 CrateDB 中吗？

标签： apache-kafkacratecratedb

Answer 1

通常，您会使用 Kafka Connect 将 Kafka 集成到目标（和源）系统，并为目标技术使用适当的连接器。

我找不到 CrateDB 的 Kafka Connect 连接器，但有一个Kafka Connect 的JDBC 接收器连接器和一个CrateDB 的 JDBC 驱动程序，所以这可能值得一试。

您可以在此处阅读有关Kafka Connect 的更多信息，并在此博客系列中查看它的实际应用：

• https://www.confluent.io/blog/simplest-useful-kafka-connect-data-pipeline-world-thereabouts-part-1/
• https://www.confluent.io/blog/blogthe-simplest-useful-kafka-connect-data-pipeline-in-the-world-or-thereabouts-part-2/
• https://www.confluent.io/blog/simplest-useful-kafka-connect-data-pipeline-world-thereabouts-part-3/

免责声明：我为 Confluent 工作，并撰写了上述博客文章。