无法从春季云流kafka捕获RecordTooLargeException

Question

我正在使用Spring cloud stream kafka作为活页夹。 当我的消息太大时，我得到了错误

  ERROR o.s.k.s.LoggingProducerListener - Exception thrown when sending a message with key='null' and payload='{123, 34, 105, 100, 34, 58, 34, 115, 105, 110, 103, 97, 112, 111, 114, 101, 104, 101, 114, 97, 108, ...' to topic page:
    org.apache.kafka.common.errors.RecordTooLargeException: The message is 4711755 bytes when serialized which is larger than the maximum request size you have configured with the max.request.size configuration.

这是我下面用于发送消息的springboot代码

 private BinderAwareChannelResolver resolver;

    boolean isSent = this.resolver.resolveDestination(this.topic)
                    .send(message);

由于我得到了错误，我应该能够在springboot代码中捕获RecordTooLargeException。 但是，它没有被捕获，并且代码继续。 isSent也返回为“ true”。 它不应该返回假吗？ 我如何捕获此错误并进行处理？ 谢谢

Answer 1

如果错误是内部错误，并且是由不受您的应用程序代码直接控制的任何线程引发的，则可能要使用UncaughtExceptionHandler

Thread.setDefaultUncaughtExceptionHandler((whichThread, whatException) -> {
            if (whatException.getClass()
                    .equals(org.apache.kafka.common.errors.RecordTooLargeException.class) ||
                    whatException.getCause().getClass()
                            .equals(org.apache.kafka.common.errors.RecordTooLargeException.class)) {
                // do something
            }
            else if (or) else {
            // others
            }
        });

但是上面的代码只是让您了解该异常。 如果收到的记录大于大小，则应在代理和主题上进行更改。

max.message.bytes (topic)
message.max.bytes (broker)

PS：您可能要使用instanceof或isAssignableFrom()代替getClass().equals() 。

更新：

我在KafkaProducer遇到了相同的错误，并且在Callback返回了异常

producer.send(new ProducerRecord<>(topic, key, value), (recordMetadata, exception) -> {
    if (exception instanceof RecordTooLargeException) {
          // handling code
    }
});

您还可以看到实现Spring kafka异步回调