簡體   English   中英

卡夫卡頻道中使用槽的動態主題

[英]Dynamic topic in kafka channel using flume

是否可能有一個帶有動態主題的kafka頻道-例如可以指定主題標頭的kafka接收器,或可以使用標頭中的值的HDFS接收器?

我知道我可以多路復用以使用多個通道(具有多個通道配置),但這是不可取的,因為我想使用一個動態HDFS接收器,而不是每個kafka通道使用一個HDFS接收器。

我的理解是,Flume Kafka通道只能映射到單個主題,因為它同時產生和使用該特定主題的日志。

查看Flume 1.6.0中KafkaChannel.java中的代碼,可以看到只有一個主題被訂閱(每個線程有一個使用者)。

暫無
暫無

聲明:本站的技術帖子網頁,遵循CC BY-SA 4.0協議,如果您需要轉載,請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.

 
粵ICP備18138465號  © 2020-2024 STACKOOM.COM