如果我显式调用，我的kafka错误处理程序不会被调用？

Question

我正在开发一个kafka消费者API，它消耗我的主题消息。 当它消耗不正确的消息（比如没有格式良好的JSON消息）时，我希望应该调用我的错误处理程序来通知支持组对不正确的消息采取某些操作。

但我的错误处理程序不会自动调用。 你能告诉我代码中缺少什么吗？

如果我将我的错误处理程序自动装配到我的侦听器类并显式调用，一切正常。

错误处理程序类

public class MyErrorHandler implements ErrorHandler, KafkaListenerErrorHandler {
@Override
public Object handleError(Message<?> message, ListenerExecutionFailedException ex, Consumer<?, ?> consumer) {
.....
   }
}

消费者配置

@Bean
public KafkaListenerContainerFactory<ConcurrentMessageListenerContainer<String, String>> kafkaManualAckListenerContainerFactory() {
    ConcurrentKafkaListenerContainerFactory<String, String> factory = new ConcurrentKafkaListenerContainerFactory<>();
    factory.setConsumerFactory(consumerGroupFactory());
    //factory.getContainerProperties().setPollTimeout(3000);
    //factory.getContainerProperties().setAckMode(AckMode.MANUAL_IMMEDIATE);
    //factory.getContainerProperties().setAckOnError(false);
    factory.setErrorHandler(new MyErrorHandler());
    return factory;
}

@Bean
public MyErrorHandler myErrorHandler() {
    return new MyErrorHandler();
}

听众课

@KafkaListener(topics = "${kafka.proposal.topic.name}" ,                containerFactory = "kafkaManualAckListenerContainerFactory",                errorHandler ="${kafka.custom.error.handler}")
public void listen(ConsumerRecord<?,?> cr)  {   
     //Logic to get the message from topic and parse it to json, here i am testing with incorrect messages and producing JsonSyntaxException
}

注意：我的属性文件中的kafka.custom.error.handler = myErrorHandler。

我希望自动调用我的错误处理程序。 但事实并非如此。 我错过了任何配置。

Answer 1

如果发生反序列化错误，例如在JsonDeserializer ，它会在Spring获取消息之前发生，因此我们无法调用错误处理程序。

从2.2版开始，您可以使用ErrorHandlingDeserializer2来包装反序列化程序。 这允许框架获得失败的反序列化并将其传递给容器的错误处理程序。

当反序列化器无法反序列化消息时，Spring无法处理该问题，因为它发生在poll（）返回之前。 为解决此问题，2.2版引入了ErrorHandlingDeserializer2。 这个反序列化器委托给一个真正的反序列化器（键或值）。 如果委托无法反序列化记录内容，则ErrorHandlingDeserializer2将在包含原因和原始字节的标头中返回空值和DeserializationException。 当您使用记录级MessageListener时，如果ConsumerRecord包含键或值的DeserializationException标头，则使用失败的ConsumerRecord调用容器的ErrorHandler。 记录未传递给侦听器。