消费者不知道分区撤销

Question

主题名称：testTopic主题消息的总数：1分区：8消费者组名称：Consumer1
消费者语言：带分区监听器的Java impl基础设施：有4个jvms并行运行（这意味着4个消费者使用相同的组名运行）

问题：当我启动我的第一个消费者时，调用Lister回调方法并完成分区分配..这个消费者开始处理我的消息。

举个例子，这个消费者拿着一条消息MSG-1，我的处理器正在处理消息（我故意把20 mille秒作为线程等待）。 所以，没有将MSG-1提交回带偏移的话题。

消费者session.timeout.ms = 15 mille秒的属性。

与此同时，消费者2开始了，

此消费者启动，分配了分区（正确回调方法被调用）并且没有消费消息，因为这两条消息由消费者1持有。

现在，从消费者心跳间隔超过并且经纪人认为消费者1已经死亡并且在消费者-2（所有）处重新分配分区现在回叫在消费者-2（被分配和撤销）处调用的方法。 与此同时，我的会话超时已过期，msg-1和msg-2重新回到主题并获取消费者2。

现在，我已经两次处理了msg-1 && msg-2 ....一次来自consumer-1和consumer-2

我的问题是，

1. 使用分区撤销回调方法没有调用Consumer-1？
2. 在我的线程休眠完成后（来自消费者-1），他试图用分区提交偏移量....我们正在完成分区重新分配..你不能提交。 这是正确的，但我怎么能得到消费者1的回叫方法....

-Naresh。

Answer 1

使用分区撤销回调方法没有调用Consumer-1？

如果消费者参与重新平衡，则只能获得分区撤销回调。 但是，由于它超时并且确实退出了组，它没有参与重新平衡，并且经纪人不向消费者发送任何信息。 因此，消费者不知道分区被撤销（因此，没有回调）。

在我的线程休眠完成后（来自消费者-1），他试图用分区提交偏移量....我们正在完成分区重新分配..你不能提交。 这是对的

不确定你的意思we are getting partition re-assignment is done ：因为消费者没有参与重新平衡，它仍然认为它拥有分区。 因此，它尝试提交，并且正如您所说的那样，（正确地）不允许它从组中退出时提交。

但是我如何从消费者1获得回叫方法....

您需要再次调用poll()重新加入该组以恢复健康状态。

一般性评论：你的超时配置似乎相当低，不建议在实践中有这么小的超时。 我认为很难找到一个具有如此低的超时的稳定组，因为很可能消费者会定期达到超时，退出组，并需要再次重新加入。