![](/img/trans.png)
[英]How to covert Simple Java POJO to avro schema .avsc file and then to autogenerated avro records to finally push it into Kafka topic?
[英]Convert java POJO to Avro schema object then send to kafka server by KafkaTemplate
在我们的 restAPI 中,我们将获得一个复杂的 JSON 有效负载并将其映射到 POJO。 并基于 avro avsc 模式文件,我使用 avro-maven-plugin 生成一些 avro 模式类。
我的问题是,当我们使用 KafkaTemplate 向 kafka 和模式注册表发送消息时,我们需要使用 avro 模式对象发送。 由于字段数量众多,我们无法手动将负载请求对象中的值映射到 avro 模式对象中。
将任何 pojo 类转换为 avro genric 记录的两个步骤
使用 jackson/avro,通过 Avro Mapper 将 pojo 转换为字节。
使用 Avro GenericDatumReader 将其作为通用记录读取。
public class AvroConverter{
public static GenericRecord convertToGenericRecord(String schemaPath, SomeClass someObject){
Schema schema = new Schema.Parser().setValidate(true).parse(new ClassPathResource(schemaPath).getFile());
AvroSchema avSchema = new AvroSchema(schema);
ObjectWritter writter = new AvroMapper().writer(avSchema);
final byte[] bytes = objectWriter.writeValueAsBytes(someObject);
GenericDatumReader<Object> genericRecordReader = new GenericDatumReader<>(avSchema);
return (GenericRecord) genericRecordReader.read(null, DecoderFactory.get().binaryDecoder(bytes, null));
}
}
Gradle 依赖
implementation 'com.fasterxml.jackson.dataformat:jackson-dataformat-avro'
在进行序列化时,您可能会遇到问题。 为此,您必须配置 avro 映射器属性
声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.