Kafka Connect：如何在沒有架構注冊表的情況下使用AvroConverter？

Question

在我們的工人分發的道具中，我們具有：

value.converter=io.confluent.connect.avro.AvroConverter
value.converter.schema.registry.url=<dev-schema-url>

我們注意到使用模式注冊表時性能很差。 我可以在沒有架構注冊表的情況下使用AvroConverter嗎？ 我嘗試過https://github.com/farmdawgnation/registryless-avro-converter，但是我們遇到了：

java.io.IOException Not a data file 

1. kafka連接器讀取的每條消息都會聯系架構注冊表嗎？

2. 架構是否已緩存？

3. 在沒有架構注冊表的情況下使用AvroConverter的其他選項是什么？

Answer 1

我們注意到使用架構注冊表時性能很差

您是否分析了性能問題的根源和原因？ 如圖所示，它是網絡流量嗎？ 來自架構注冊表的響應時間？ 等等

成功使用Schema Registry的人很多。 性能不是Schema Registry的已知問題。

kafka連接器讀取的每條消息都會聯系架構注冊表嗎？

沒有

架構是否已緩存？

是。

在沒有架構注冊表的情況下使用AvroConverter的其他選項是什么？

沒有; AvroConverter需要架構注冊表。

參考文獻：

• https://docs.confluent.io/current/schema-registry/docs/index.html
• https://docs.confluent.io/current/schema-registry/docs/connect.html
• https://medium.com/@stephane.maarek/introduction-to-schemas-in-apache-kafka-with-the-confluent-schema-registry-3bf55e401321
• https://qconnewyork.com/system/files/presentation-slides/qcon_17_-_schemas_and_apis.pdf
• https://www.confluent.io/blog/schema-registry-kafka-stream-processing-yes-virginia-you-really-need-one/
• https://www.confluent.io/blog/how-i-learned-to-stop-worrying-and-love-the-schema-part-1/