apache-kafka - 具有高突变频率的 Debezium 效率
问题描述
我正在创建一个从 Oracle 通过 Kafka 到 Azure 的流,我想知道 Debezium 是否对此有任何好处。它似乎符合要求,但是当我查看通过 Kafka 发送的数据时,我担心效率。这些数据包似乎并不精简,但相当大。
有没有人有过从本地到 Azure 的线路上大约 4000 个突变/秒的设置经验?线路大约500Mbit,但与他人共享...
我倾向于使用我自己的简单格式将数据包传输到 Azure,然后在那里将它们转换为 Debezium,以便在管道的其余部分中摄取。
谢谢,米洛
解决方案
推荐阅读
- sql - SQL Server:按组处理
- python - 按布尔系列过滤熊猫df
- react-native - useState 在开关 onValueChange 上落后一步
- java - (Java) 使用 Object wait() 和 notify() 的线程安全
- postgresql - 撤消查询的反向sql
- c# - 为所有关键字字段 NEST 添加规范器
- .net - 如何在多个 API 中使用用户信息?
- asp.net-core - ASP.NET Core 3.1“‘用户’不包含‘FindFirstValue’的定义”
- mysql - 如何防止同一用户在 MySQL 中更新自己的记录?
- python - QCombobox 继承背景图像的背景 - PyQt5