簡體   English   中英

根據消費者從Kafka主題中讀取過濾器消息

[英]read filter messages from Kafka topic according to consumer

我們如何在Kafka主題中使用來自多個分區或單個分區的自定義消息?

在使用Kafka主題的多個分區中的消息時,如何僅讀取1條消息

您可以設置max.poll.records消費者屬性來設置單次輪詢返回的記錄數的上限。

另一種替代方法(也是更通用的方法)是讀取任意數量的消息,但僅將偏移量提交到特定點,以使更少的消息被“消耗”。 請記住,在Kafka中,消息實際上從不會在讀取時被清除的意義上被消耗掉-通過在消費者組的基礎上保留主題分區偏移量,從而產生了一種消耗的幻覺。

暫無
暫無

聲明:本站的技術帖子網頁,遵循CC BY-SA 4.0協議,如果您需要轉載,請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.

 
粵ICP備18138465號  © 2020-2024 STACKOOM.COM