处理模式注册表deserialiser kafka时出现异常

Question

我正在关注汇合链接，以便在更改mysql表时发布kafka消息。 当我尝试从springboot应用程序中使用此消息时，我得到以下异常。 我该如何解决这个问题，以便我可以阅读该消息。 有时我能够阅读消息，但如果consumed message is key: null value : 2foo 䶰Z 䶰Z话，我会得到序列化版本consumed message is key: null value : 2foo 䶰Z 䶰Z

Caused by: java.lang.ClassCastException: java.lang.String cannot be cast to com.spring.kafkaexample.springbootkafkaconsumer.model.Foobar
    at com.spring.kafkaexample.springbootkafkaconsumer.listener.KafkaConsumer.consume(KafkaConsumer.java:22) ~[classes/:na]
    at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method) ~[na:1.8.0_131]
    at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:62) ~[na:1.8.0_131]
    at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43) ~[na:1.8.0_131]
    at java.lang.reflect.Method.invoke(Method.java:498) ~[na:1.8.0_131]
    at org.springframework.messaging.handler.invocation.InvocableHandlerMethod.doInvoke(InvocableHandlerMethod.java:181) ~[spring-messaging-5.0.8.RELEASE.jar:5.0.8.RELEASE]
    at org.springframework.messaging.handler.invocation.InvocableHandlerMethod.invoke(InvocableHandlerMethod.java:114) ~[spring-messaging-5.0.8.RELEASE.jar:5.0.8.RELEASE]

以下是我的代码

@KafkaListener(topics = "mysql-foobar", groupId = "group_id")
public void consume(ConsumerRecord<String, Foobar> message) {

    System.out.println("consumed message is key: "+message.key() + " value :  "+message.value());
}

解串器

@Bean
public Map<String, Object> consumerConfigs() {
    Map<String, Object> props = new HashMap<>();
    props.put(ConsumerConfig.BOOTSTRAP_SERVERS_CONFIG, "127.0.0.1:9092");
    props.put(ConsumerConfig.KEY_DESERIALIZER_CLASS_CONFIG, StringDeserializer.class);
    props.put(ConsumerConfig.VALUE_DESERIALIZER_CLASS_CONFIG, KafkaAvroDeserializer.class);
    props.put(ConsumerConfig.GROUP_ID_CONFIG, "avro");

    return props;
}

Answer 1

如果你得到String cannot be cast to com.spring.kafkaexample.springbootkafkaconsumer.model.Foobar ，那么这意味着你有一个生产者向你的主题发送一个字符串，这不是一个有效的Foobar实例。

如果你得到2foo 䶰Z 䶰Z东西，那就意味着你要打印掉一些二进制数据的UTF-8原始字节，比如Avro，你最好不要提取字段。对象而不是仅仅依赖于隐式的toString方法。