Kafka 復制因子 JMX

Question

當我復制我的消息時，我正在嘗試收集一些 Kafka Telemetry 。

當我在 3 個實例中復制記錄時，我認為我的瓶頸在 .network 中RF=3

我需要數據來支持我的理論，那么我們是否有任何JMX數據可以告訴我在Grafana中在三台機器中復制一條記錄需要多少時間。

問候。

Answer 1

查看kafka.network:type=RequestMetrics指標。 有一些指標可以跟蹤處理領導者的生產請求所花費的時間以及等待追隨者復制記錄所花費的時間。 它們在 Kafka 文檔的監控部分中突出顯示：

• kafka.network:type=RequestMetrics,name=TotalTimeMs,request=Produce ：處理生產請求所花費的總時間
• kafka.network:type=RequestMetrics,name=LocalTimeMs,request=Produce : 領導者處理生產請求所花費的時間
• kafka.network:type=RequestMetrics,name=RemoteTimeMs,request=Produce : 等待關注者的時間

還有一些其他指標，包括RequestQueueTimeMs 、 ResponseQueueTimeMs 、 ResponseSendTimeMs ，每個指標都衡量代理在處理請求時采取的不同步驟。

所有這些指標都有一些屬性，例如各種百分位數、最小值、最大值等，您應該監控這些屬性以識別集群中的潛在瓶頸。