首页 > 解决方案 > Kafka Consumer Groups 对 3 节点 Kafka 集群的限制

问题描述

我有一个用例,其中将为单个 Kafka 主题生成多个客户数据,并且处理逻辑需要为每个客户提供单独的线程。因此,为每个客户规划不同的消费群体。

该主题的客户数量可能会继续增加。因此为一个主题计划 1000 个客户。因此,如果我有 10 个主题,那么这 10 个主题中将有大约 10,000 个客户,并且将创建 10,000 个 CG。

创建这么多 CG 是否会对 3 节点 Kafka 集群产生任何性能影响。在 3 节点 Kafka 集群中可以创建的消费者组的数量是否有任何限制。

标签: apache-kafkakafka-consumer-api

解决方案


推荐阅读