librdkafka partition.assignment.strategy 添加新策略

Question

今天，对于 librdkafka， partition.assignment.strategy librdkafka有两个选项：范围和循环。 我正在寻找是否有办法添加自定义分配策略。

最好的

Answer 1

截至今天（2021 年 6 月 18 日），librdkafka 尚不支持它。

您可以在此处找到功能请求： https : //github.com/edenhill/librdkafka/issues/2284

您只能从 3 种内置策略（范围、循环、合作粘性）中选择一种。 记录在这里： https : //github.com/edenhill/librdkafka/blob/master/CONFIGURATION.md

Answer 2

还有另一种策略。 较新的策略称为Sticky ，它是在0.11.0版本中添加的。 它出现的主要原因之一是不仅要​​尝试尽可能均匀地分配主题分区，而且还要尽可能让分区与现有的消费者保持一致。

当然，您也可以创建自己的策略。 目前， AbstractPartitionAssignor是一个抽象类，它使用挖掘有关主题的数据执行一些常见工作，以帮助实现您的逻辑。 这篇博客解释了自定义分配策略。