apache-kafka - 是否可以在 Debezium 中禁用初始数据快照？
问题描述
目前，我正在使用 Debezium 将数据更改从 MySQL Binlog 传输到 Kafka，然后再传输到 BigQuery。
我将分布式模式配置与snapshot.mode=initial. 但不幸的是，我们的 Mysql 实例中的数据量太大了，因为 Debezium 从一开始就不断地读取 Binlog。
我正在尝试snapshot.mode=schema_only和auto.offset.reset=latest。但是 MySQL 实例中仍然存在峰值。
是否有任何适当的配置可以最大程度地减少读取 Binlog 的大量消耗？
解决方案
推荐阅读
- node.js - Brain.js 没有使用 GPU 进行训练
- swift - 如何从 Struct 更新 ViewController 中的 imageView
- node.js - 在 aws lambda 上锐利。使用 .toBuffer 时设备上没有剩余空间
- postgresql - 如何修复 org.postgresql.util.PSQLException: ERROR: op ANY/ALL (array) requires array on the right side
- c - C中的函数指针转换
- amazon-web-services - 使用 AWS 数据 api 连接到 Aurora Postgres 数据库的秘密字符串应该采用什么格式？
- google-apps-script - Google Apps 脚本 - 如何授予编辑者访问基于电子表格的文件的权限？
- selenium - 在没有硒和 API 的情况下抓取linkedin 配置文件
- google-chrome - pdf中的命名目的地 - Chrome问题
- c# - Web 窗体导航到根 URL 时如何为一次性令牌添加响应 cookie？