首页 > 解决方案 > 在 Kafka 中合并来自 RDBMS 的多个事件

问题描述

我们正在从 RDBMS 数据库的不同表中捕获变更数据。每个单独的更改都被视为一个事件。所有事件都发布到单个 Kafka 主题中。每个事件(消息)都将表名作为标题。我们需要满足某些用例,我们需要合并多个事件并填充输出。整个事情都是实时发生的。

我们正在使用 Apache Kafka。

标签: apache-kafkaapache-kafka-streams

解决方案


不确定合并事件的确切含义,但这似乎在 Kafka 流域中。您可以使用流和 ktables 设计每个事件,为此您将应用 Kafka 流拓扑(例如加入事件流并应用一些业务逻辑)

但是您需要更多技术建议吗?

雅尼克


推荐阅读