簡體   English   中英

如果每個主題只有一個分區,一組中的消費者是否會每個訂閱一個主題?

[英]Will consumers in a group subscribe to one topic each, if there is a single partition per topic?

我正在使用 Debezium 記錄我的數據庫中的更改,Debezium 在主題中為我的數據庫中存在的每個表生成更改事件。這些更改記錄用於填充另一個數據庫。

如果我將每個主題限制為只有 1 個分區,假設我有 4 個消費者在運行,當消費者訂閱主題時,這 4 個消費者是否會在他們之間划分主題? (他們會在他們之間分配分區,但這里 1 個主題 = 1 個分區)

上面的設置是否意味着對於每個表,主題上生成的事件將始終按順序執行,因為最多有 1 個消費者同時對主題進行操作?

我目前正試圖讓 Kafka 限制每個主題 1 個分區,並有 2 個消費者。 但 2 位消費者似乎時不時地選擇不同的話題,並且對這些話題沒有“粘性”。

是的,如果有 4 個主題,每個主題有 1 個分區和 4 個消費者,消費者將在它們之間平均分配分區,這將導致每個消費者有 1 個主題。

但是,要獲得“粘性分配”,您需要為消費者組提供 static 組 ID 否則,當出現故障並觸發重新平衡時,可以為消費者分配不同的分區(在本例中為不同的主題)。

暫無
暫無

聲明:本站的技術帖子網頁,遵循CC BY-SA 4.0協議,如果您需要轉載,請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.

 
粵ICP備18138465號  © 2020-2024 STACKOOM.COM