apache-kafka - 如何使用 Apache Nifi 发布和使用来自 RDBMS 的数千个表的更改

Question

您有一个包含数千个表 (~9.000) 的 RDBMS。这些表中的更改应通过 Apache Kafka 发布给其他消费者。我知道 Apache Nifi 是几乎任何来源的数据路由和转换工具。我想到了一个图形界面，我可以从源系统中选择一个表/对象来将记录发布到 Apache Kafka。但是，在 Apache Nifi 和 Apache Kafka 中，这么多表的变更数据捕获会是什么样子？我是否必须创建〜9.000 个处理器（每个表一个）并将每个表发布到每个表的专用主题？或者有没有更优雅的方法来做到这一点？

标签： apache-kafkaapache-nifi