Kafka流：主题分区->消费者1：1映射未发生
[英]Kafka streams: topic partitions->consumer 1:1 mapping not happening
问题描述
我已经编写了一个流应用程序，以讨论5个具有10个分区的代理群集的主题。 我在这里尝试了多种组合，例如10个应用实例（在10台不同的计算机上），每个实例有1个流线程，5个实例有2个线程。 但是由于某种原因，当我签入kafka管理器时，分区和流线程之间的1：1映射没有发生。 一些线程正在拾取2个分区，而有些则没有拾取。 你能帮我吗？ 所有线程都属于同一组，并且仅订阅一个主题。 我们使用的kafka流版本是0.11.0.2，代理版本是0.10.0.2
谢谢你的帮助
1 个解决方案
解决方案1
0 2018-09-02 13:27:24
也许您正在访问https://issues.apache.org/jira/browse/KAFKA-7144-我建议您升级到最新版本。
注意：您不需要升级经纪人
Kafka使用者 - 消费者进程和线程与主题分区的关系是什么
[英]Kafka consumer - what's the relation of consumer processes and threads with topic partitions
python3.6中如何将kafka主题的所有分区分配给消费者？
[英]How to assign all partitions of a kafka topic to a consumer in Python3.6?
Kafka 主题仍然与 Kafka Streams 应用程序的旧消费者组相关联
[英]Kafka topic is still associating with old consumer group of Kafka Streams application
Consumer.poll无法从具有3个分区的Kafka Topic中获取记录
[英]consumer.poll not fetching records from Kafka Topic having 3 partitions
声明:本站的技术帖子网页，遵循CC BY-SA 4.0协议，如果您需要转载，请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.