Spring-Cloud-Stream-Kafka-Binder 函數風格忽略自定義 De/Serializer 和/或 useNativeEncoding？

Question

我們剛剛升級到Spring-Cloud-Stream 3.0.0-Release，遇到以下問題：

當使用這樣的功能樣式時：

public class EventProcessor {

    private final PriceValidator priceValidator;

    @Bean
    public Function<Flux<EnrichedValidationRequest>, Flux<ValidationResult>> validate() {
        return enrichedValidationRequestFlux -> enrichedValidationRequestFlux
                .map(ProcessingContext::new)
                .flatMap(priceValidator::validateAndMap);
    }
}

application.yaml 看起來像這樣：

spring.cloud.stream:
  default-binder: kafka
  kafka:
    binder:
      brokers: ${kafka.broker.prod}
      auto-create-topics: false
  function.definition: validate

# INPUT: enrichedValidationRequests
spring.cloud.stream.bindings.validate-in-0:
  destination: ${kafka.topic.${spring.application.name}.input.enrichedValidationRequests}
  group: ${spring.application.name}.${STAGE:NOT_SET}
  consumer:
    useNativeDecoding: true


spring.cloud.stream.kafka.bindings.validate-in-0:
  consumer:
    configuration:
      key.deserializer: org.apache.kafka.common.serialization.StringDeserializer
      value.deserializer: de.pricevalidator.deserializer.EnrichedValidationRequestDeserializer


# OUTPUT: validationResults
spring.cloud.stream.bindings.validate-out-0:
  destination: validationResultsTmp
  producer:
    useNativeEncoding: true

spring.cloud.stream.kafka.bindings.validate-out-0:
  producer:
    compression.type: lz4
    messageKeyExpression: payload.offerKey
    configuration:
      key.serializer: org.apache.kafka.common.serialization.StringSerializer
      value.serializer: de.pricevalidator.serializer.ValidationResultSerializer

似乎序列化完成了兩次——當我們攔截在 kafka 主題中生成的消息時，消費者只會將它們顯示為 JSON（字符串），但現在它是一個不可讀的字節 []。 此外，生產中的下游消費者不能再對消息進行反序列化。 奇怪的是，輸入消息的反序列化似乎工作得很好，無論我們在消費者屬性中放入什么（在綁定器或默認 kafka 級別）我們有一種感覺，這個錯誤“回來了”，但我們不能在代碼中找到確切的位置：https ://github.com/spring-cloud/spring-cloud-stream/issues/1536

我們的（丑陋的）解決方法：

@Slf4j
@Configuration
public class KafkaMessageConverterConfiguration {

    @ConditionalOnProperty(value = "spring.cloud.stream.default-binder", havingValue = "kafka")
    @Bean
    public MessageConverter validationResultConverter(BinderTypeRegistry binder, ObjectMapper objectMapper) {
        return new AbstractMessageConverter(MimeType.valueOf("application/json")) {
            @Override
            protected boolean supports(final Class<?> clazz) {
                return ValidationResult.class.isAssignableFrom(clazz);
            }

            @Override
            protected Object convertToInternal(final Object payload, final MessageHeaders headers, final Object conversionHint) {
                return payload;
            }
        };
    }
}

是否有一種“正確”的方式來設置自定義序列化程序或像以前一樣獲取本機編碼？

Answer 1

所以這是一個在 3.0.0.RELEASE - https://github.com/spring-cloud/spring-cloud-stream/commit/74aee8102898dbff96a570d2d2624571b259e141之后報告的問題。 它已得到解決，幾天后將在 3.0.1.RELEASE (Horsham.SR1) 中可用。