apache-kafka - Kafka - 使用许多分区的密钥特定订阅

Question

我有一个带有 ~100k 离散键的主题。使用手动分区分配，我希望能够尽可能接近订阅单个密钥。

在这些博客文章 ( a , b ) 中，Confluent 说支持 200k 分区，但仅建议每个代理使用 4k 分区。

问题是，我还能做些什么来支持更多分区（除了添加更多代理）。

或者，在 Kafka 中是否有一些支持按键订阅的模式？

标签： apache-kafka