SimpleMessageListenerContainer 批量消息处理

Question

我有一个传入数据流，作为单独的消息发送到 RabbitMQ。

我想将这些发送到需要一批消息的服务。 当我有一批 1000 条消息或 5 秒过期时，我需要向服务发送请求。 这可能使用 SimpleMessageListenerContainer 吗？

SimpleMessageListenerContainer 支持事务，但这对 5 秒超时没有帮助。 我确实查看了方法 doReceiveAndExecute(BlockingQueueConsumer consumer) 和“receiveTimeout”，但由于此变量在事务循环内，我最终可能会等待每条消息 5 秒（1000*5 秒 = 83 分钟）。

我目前有一个通道感知侦听器，它将消息分批放入一个批量处理器中，该处理器将管理我的超时和队列长度。 SimpleMessageListenerContainer 设置为手动确认。 但是，由于侦听器在消息实际发送到服务之前返回，因此当我在通道关闭时确认消息时偶尔会遇到问题。

我考虑过编写自己的 ListenerContainer，将整个 BlockingQueueConsumer 发送到 Listener。 这是唯一的解决方案还是已经有人设法做类似的事情了？

Answer 1

您可以使用ChannelAwareMessageListener,设置acknowledgeMode=MANUAL ； 在听众中累积交付； 启动一个计时器（计划任务）以在 +5 秒内执行并保留对通道的引用。 当新的交货到达时，取消任务，将新的交货添加到集合中。

当 1000 次交付到达时（或计划任务触发）； 调用您的服务； 然后使用channel.basicAck() （多个）确认已处理的消息。

您将需要处理一些竞争条件，但这应该很容易。 也许另一个批次队列最简单，因为其他线程正在等待批次到达该队列。

编辑

从 2.2 开始， SimpleMessageListenerContainer支持本地发送消息批次 - 请参阅Batched Messages 。

从 2.2 版开始， SimpleMessageListeneContainer可用于在消费者端（生产者发送离散消息的地方）创建批处理。

设置容器属性consumerBatchEnabled以启用此功能。 deBatchingEnabled也必须为真，以便容器负责处理这两种类型的批次。 当 consumerBatchEnabled 为真时，实现BatchMessageListener或ChannelAwareBatchMessageListener 。 有关将此功能与 @RabbitListener 一起使用的信息，请参阅@RabbitListener with Batching @RabbitListener 。