apache-kafka - Kafka Connect 配置和偏移主题可以共享吗
问题描述
两个 Apacke Kafka Connect 元数据主题config.storage.topic
和offset.storage.topic
是否可以在两个或多个单独的 Kafka Connect 集群之间安全共享?
虽然文档为每个说明:
对于所有具有相同
group.id
.
从文档中不清楚这些主题是否需要由单个 Kafka Connect 集群拥有。
从广义上讲,我可以看到我的 connectgroup.id
可以用作主题中项目的前缀,但尚不清楚是否可以,也不清楚是否可以安全地将 Connect 集群从彼此的元数据中分离出来。
解决方案
每个集群都需要自己的专用主题。
如果您有多个 Kafka Connect 集群尝试使用相同的 config/offset/status 主题(即使使用不同group.id
的设置),您将从 Kafka Connect 获得大量错误和/或意外行为。
推荐阅读
- erlang - 如何在 ejabberd 中向离线用户发送推送通知
- javascript - 在javascript中的正则表达式字符串中动态添加转义反斜杠到反斜杠
- vba - 遵循标准方式,但无法使用 VBA 单击网页中的对象
- java - 从 Firebase 存储中获取随机图像
- wordpress - 每个用户的 WooCommerce 自定义变体条款
- java - 如何扫描隐藏的音频/视频文件(以“.”点开头)?
- android - Android webview访问http协议中的android_asset目录
- c++ - const 引用函数参数:是否可以禁止临时对象?
- javascript - 如何根据父键推送子对象
- odoo - 为什么我的私人频道在 Odoo 10 中总是空的?