將整個 kafka 主題具體化為 RocksDB

Question

我目前正在做 kafka 流的 POC，其中我試圖將 kakfa 用作消息傳遞總線和數據庫。 我正在嘗試 ksql 用於第二個目的。 我可以使用 ksql 查詢主題，但需要很長時間，因為 ksql 每次讀取整個主題並在客戶端對其進行過濾。 有沒有辦法將整個主題具體化為 kafka 中的狀態存儲？

Answer 1

您可以將主題讀取為 KTable 並強制狀態存儲實現通過交互式查詢 API 訪問內容。

StreamsBuilder builder = new StreamsBuilder();
 KTable<Integer, Integer> table = builder.table(
   "topicName",
   Materialized.as("queryable-store-name"));