[英]MONGODB KAFKA Source CONNECTOR How to change Kafka Parition key
[英]How to override the Kafka Topic configurations in MongoDB Source Connector?
我正在使用 MongoDB 源連接器將數據從 MongoDB 集合獲取到 Kafka。 此連接器的作用是使用以下命名約定自動創建主題:
[prefix_provided_in_the_connector_properties].[db_name].[collection_name]
在MongoDB 源連接器的文檔中,沒有提到覆蓋主題配置,例如分區數或復制因子。 我有以下問題:
- 是否可以覆蓋 connector.properties 文件中的主題配置?
- 如果沒有,那么它是在 Kafka 的一端完成的嗎? 如果是這樣,我們可以單獨配置每個主題的設置還是會全局影響所有主題?
謝謝!
聽起來你的經紀人有auto.create.topics.enable=true
。 建議禁用此功能並強制手動創建主題。
Connect 只為自己創建內部主題。 理想情況下,源連接器應該提前創建它們的主題,否則,您將獲得代理server.properties
設置的默認值。 更改值不會更改現有主題
聲明:本站的技術帖子網頁,遵循CC BY-SA 4.0協議,如果您需要轉載,請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.