簡體   English   中英

將 java POJO 轉換為 Avro 模式對象,然后通過 KafkaTemplate 發送到 kafka 服務器

[英]Convert java POJO to Avro schema object then send to kafka server by KafkaTemplate

在我們的 restAPI 中,我們將獲得一個復雜的 JSON 有效負載並將其映射到 POJO。 並基於 avro avsc 模式文件,我使用 avro-maven-plugin 生成一些 avro 模式類。

我的問題是,當我們使用 KafkaTemplate 向 kafka 和模式注冊表發送消息時,我們需要使用 avro 模式對象發送。 由於字段數量眾多,我們無法手動將負載請求對象中的值映射到 avro 模式對象中。

將任何 pojo 類轉換為 avro genric 記錄的兩個步驟

  1. 使用 jackson/avro,通過 Avro Mapper 將 pojo 轉換為字節。

  2. 使用 Avro GenericDatumReader 將其作為通用記錄讀取。

public class AvroConverter{

 public static GenericRecord convertToGenericRecord(String schemaPath, SomeClass someObject){
  Schema schema = new Schema.Parser().setValidate(true).parse(new ClassPathResource(schemaPath).getFile());
  AvroSchema avSchema = new AvroSchema(schema);
  ObjectWritter writter = new AvroMapper().writer(avSchema);
  final byte[] bytes = objectWriter.writeValueAsBytes(someObject);
  GenericDatumReader<Object> genericRecordReader = new GenericDatumReader<>(avSchema);
  return (GenericRecord) genericRecordReader.read(null, DecoderFactory.get().binaryDecoder(bytes, null));
 }

}

Gradle 依賴

    implementation 'com.fasterxml.jackson.dataformat:jackson-dataformat-avro'

在進行序列化時,您可能會遇到問題。 為此,您必須配置 avro 映射器屬性

暫無
暫無

聲明:本站的技術帖子網頁,遵循CC BY-SA 4.0協議,如果您需要轉載,請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.

 
粵ICP備18138465號  © 2020-2024 STACKOOM.COM