Kafka流：主題分區->消費者1：1映射未發生
[英]Kafka streams: topic partitions->consumer 1:1 mapping not happening
問題描述
我已經編寫了一個流應用程序，以討論5個具有10個分區的代理群集的主題。 我在這里嘗試了多種組合，例如10個應用實例（在10台不同的計算機上），每個實例有1個流線程，5個實例有2個線程。 但是由於某種原因，當我簽入kafka管理器時，分區和流線程之間的1：1映射沒有發生。 一些線程正在拾取2個分區，而有些則沒有拾取。 你能幫我嗎？ 所有線程都屬於同一組，並且僅訂閱一個主題。 我們使用的kafka流版本是0.11.0.2，代理版本是0.10.0.2
謝謝你的幫助
1 個解決方案
解決方案1
0 2018-09-02 13:27:24
也許您正在訪問https://issues.apache.org/jira/browse/KAFKA-7144-我建議您升級到最新版本。
注意：您不需要升級經紀人
Kafka使用者 - 消費者進程和線程與主題分區的關系是什么
[英]Kafka consumer - what's the relation of consumer processes and threads with topic partitions
python3.6中如何將kafka主題的所有分區分配給消費者？
[英]How to assign all partitions of a kafka topic to a consumer in Python3.6?
Kafka 主題仍然與 Kafka Streams 應用程序的舊消費者組相關聯
[英]Kafka topic is still associating with old consumer group of Kafka Streams application
Consumer.poll無法從具有3個分區的Kafka Topic中獲取記錄
[英]consumer.poll not fetching records from Kafka Topic having 3 partitions
聲明:本站的技術帖子網頁，遵循CC BY-SA 4.0協議，如果您需要轉載，請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.