RabbitMQ 中的延迟消息

Question

是否可以延迟通过 RabbitMQ 发送消息？ 例如，我想在 30 分钟后使客户端会话过期，并且我发送了一条将在 30 分钟后处理的消息。

Answer 1

您可以尝试两种方法：

旧方法：在每个消息/队列（策略）中设置 TTL（生存时间）标头，然后引入一个 DLQ 来处理它。 一旦 ttl 过期，您的消息将从 DLQ 移动到主队列，以便您的侦听器可以处理它。

最新方法：最近 RabbitMQ 提出了RabbitMQ Delayed Message Plugin ，使用它可以实现相同的功能，并且该插件支持自 RabbitMQ-3.5.8 起可用。

您可以使用类型 x-delayed-message 声明一个交换，然后使用自定义标头 x-delay 发布消息，以毫秒为单位表示消息的延迟时间。 消息将在x-delay毫秒后传递到各自的队列

byte[] messageBodyBytes = "delayed payload".getBytes("UTF-8");
Map<String, Object> headers = new HashMap<String, Object>();
headers.put("x-delay", 5000);
AMQP.BasicProperties.Builder props = new 
AMQP.BasicProperties.Builder().headers(headers);
channel.basicPublish("my-exchange", "", props.build(), messageBodyBytes);

更多信息： git

Answer 2

随着 RabbitMQ v2.8 的发布，预定交付现在可用，但作为一个间接功能： http : //www.javacodegeeks.com/2012/04/rabbitmq-scheduled-message-delivery.html

Answer 3

感谢Norman 的回答，我可以在 Node.js 中实现它。

从代码中一切都非常清楚。

var ch = channel;
ch.assertExchange("my_intermediate_exchange", 'fanout', {durable: false});
ch.assertExchange("my_final_delayed_exchange", 'fanout', {durable: false});

// setup intermediate queue which will never be listened.
// all messages are TTLed so when they are "dead", they come to another exchange
ch.assertQueue("my_intermediate_queue", {
      deadLetterExchange: "my_final_delayed_exchange",
      messageTtl: 5000, // 5sec
}, function (err, q) {
      ch.bindQueue(q.queue, "my_intermediate_exchange", '');
});

ch.assertQueue("my_final_delayed_queue", {}, function (err, q) {
      ch.bindQueue(q.queue, "my_final_delayed_exchange", '');

      ch.consume(q.queue, function (msg) {
          console.log("delayed - [x] %s", msg.content.toString());
      }, {noAck: true});
});

Answer 4

由于我没有足够的声誉来添加评论，因此发布了一个新答案。 这只是对http://www.javacodegeeks.com/2012/04/rabbitmq-scheduled-message-delivery.html已经讨论过的内容的补充

除了在消息上设置 ttl 之外，您可以在队列级别设置它。 您也可以避免仅仅为了将消息重定向到不同的队列而创建新的交换。 这是示例 Java 代码：

制作人：

import com.rabbitmq.client.Channel;
import com.rabbitmq.client.Connection;
import com.rabbitmq.client.ConnectionFactory;
import java.util.HashMap;
import java.util.Map;

public class DelayedProducer {
    private final static String QUEUE_NAME = "ParkingQueue";
    private final static String DESTINATION_QUEUE_NAME = "DestinationQueue";

    public static void main(String[] args) throws Exception{
        ConnectionFactory connectionFactory = new ConnectionFactory();
        connectionFactory.setHost("localhost");
        Connection connection = connectionFactory.newConnection();
        Channel channel = connection.createChannel();

        Map<String, Object> arguments = new HashMap<String, Object>();
        arguments.put("x-message-ttl", 10000);
        arguments.put("x-dead-letter-exchange", "");
        arguments.put("x-dead-letter-routing-key", DESTINATION_QUEUE_NAME );
        channel.queueDeclare(QUEUE_NAME, false, false, false, arguments);

        for (int i=0; i<5; i++) {
            String message = "This is a sample message " + i;
            channel.basicPublish("", QUEUE_NAME, null, message.getBytes());
            System.out.println("message "+i+" got published to the queue!");
            Thread.sleep(3000);
        }

        channel.close();
        connection.close();
    }
}

消费者：

import com.rabbitmq.client.ConnectionFactory;
import com.rabbitmq.client.Connection;
import com.rabbitmq.client.Channel;
import com.rabbitmq.client.QueueingConsumer;

public class Consumer {
   private final static String DESTINATION_QUEUE_NAME = "DestinationQueue";

    public static void main(String[] args) throws Exception{
        ConnectionFactory factory = new ConnectionFactory();
        factory.setHost("localhost");
        Connection connection = factory.newConnection();
        Channel channel = connection.createChannel();

        channel.queueDeclare(QUEUE_NAME, false, false, false, null);
        System.out.println(" [*] Waiting for messages. To exit press CTRL+C");

        QueueingConsumer consumer = new QueueingConsumer(channel);
        boolean autoAck = false;
        channel.basicConsume(DESTINATION_QUEUE_NAME, autoAck, consumer);

        while (true) {
            QueueingConsumer.Delivery delivery = consumer.nextDelivery();
            String message = new String(delivery.getBody());
            System.out.println(" [x] Received '" + message + "'");
            channel.basicAck(delivery.getEnvelope().getDeliveryTag(), false);
        }
    }
}

Answer 5

看起来这篇博文描述了使用死信交换和消息 ttl 来做类似的事情。

下面的代码使用 CoffeeScript 和 Node.js 来访问 Rabbit 并实现类似的东西。

amqp   = require 'amqp'
events = require 'events'
em     = new events.EventEmitter()
conn   = amqp.createConnection()
  
key = "send.later.#{new Date().getTime()}"
conn.on 'ready', ->
  conn.queue key, {
    arguments:{
      "x-dead-letter-exchange":"immediate"
    , "x-message-ttl": 5000
    , "x-expires": 6000
    }
  }, ->
    conn.publish key, {v:1}, {contentType:'application/json'}
  
  conn.exchange 'immediate'
 
  conn.queue 'right.now.queue', {
      autoDelete: false
    , durable: true
  }, (q) ->
    q.bind('immediate', 'right.now.queue')
    q.subscribe (msg, headers, deliveryInfo) ->
      console.log msg
      console.log headers

Answer 6

这是目前不可能的。 您必须将过期时间戳存储在数据库或类似的东西中，然后有一个帮助程序来读取这些时间戳并将消息排队。

延迟消息是一项经常要求的功能，因为它们在许多情况下都很有用。 但是，如果您需要使客户端会话过期，我相信消息传递不是您的理想解决方案，另一种方法可能会更好。

Answer 7

假设你控制了消费者，你可以像这样实现消费者的延迟？？：

如果我们确定队列中的第 n 条消息总是比第 n+1 条消息具有更小的延迟（这对于许多用例来说是正确的）：生产者在任务中发送 timeInformation，传达需要执行此作业的时间（当前时间 + 延迟）。 消费者：

1）从任务中读取scheduledTime

2) 如果 currentTime > scheduleTime 继续。

否则延迟 = 预定时间 - 当前时间

睡眠延迟指示的时间

消费者始终配置有并发参数。 因此，其他消息将在队列中等待，直到消费者完成作业。 所以，这个解决方案可以很好地工作，尽管它看起来很尴尬，尤其是对于大的时间延迟。

Answer 8

AMQP 协议不支持延迟消息传递，但通过使用Time-To-Live 和 Expiration and Dead Letter Exchanges扩展延迟消息传递是可能的。 此链接中描述了解决方案。 我从该链接复制了以下步骤：

一步步：

 Declare the delayed queue Add the x-dead-letter-exchange argument property, and set it to the default exchange "". Add the x-dead-letter-routing-key argument property, and set it to the name of the destination queue. Add the x-message-ttl argument property, and set it to the number of milliseconds you want to delay the message. Subscribe to the destination queue

在 GitHub 上的 RabbitMQ 存储库中还有一个用于延迟消息传递的插件。

请注意，有一个名为Celery的解决方案，它通过提供一个名为apply_async()的调用 API 来支持 RabbitMQ 代理上的延迟任务队列。 Celery 支持 Python、node 和 PHP。