AWS 中将消息从 SNS 发送到 SQS FIFO 的替代方法是什么？

Question

我有这种情况，我使用 Amazon SNS + SQS 来处理域事件。

基本上在域事件中，我向 SNS 发布消息，并且两个 SQS 队列订阅了 SNS。 由于我注意到 SQS 支持 FIFO，但 SNS 不支持 FIFO，我试图找到一个解决方案来解决如何同时将消息 A 传递到多个 SQS FIFO 队列？

到目前为止我所拥有的

• 将消息 A 发布到 SNS
• 将消息 A 分发到 SQS 1 和 SQS 2

我现在能想到的只有

• 将消息 A 发布到 SQS A
• 使用代码从 SQS 拉取消息 A 并发布到 SQS 1 和 SQS 2

不是我正在寻找的原子过程......

这种方法有替代方法吗？

Answer 1

今天，我们推出了 Amazon SNS FIFO 主题，它可以将消息扇出到多个 Amazon SQS FIFO 队列！

https://aws.amazon.com/about-aws/whats-new/2020/10/amazon-sns-introduces-fifo-topics-with-strict-ordering-and-deduplication-of-messages/

Answer 2

您可以考虑使用AWS Kinesis Data stream 。 它的一个特点是ordering 。

来自常见问题解答：https://aws.amazon.com/kinesis/data-streams/faqs/

什么时候应该使用 Amazon Kinesis Data Streams，什么时候应该使用 Amazon SQS？

记录排序。 例如，您希望将日志数据从应用程序主机传输到处理/归档主机，同时保持日志语句的顺序。

您可以处理从 Kinesis 到 SQS 的事件。

Answer 3

如果您的目标是将消息推送到两个 Amazon SQS FIFO 队列，我建议：

• 让Amazon SNS触发 AWS Lambda function
• Lambda function可以向两个Amazon SQS 队列发送相同的消息

它通过 Lambda 而不是 SNS 有效地进行扇出。

Lambda function 还可以提取它可以与 SQS 消息一起提供的消息组 ID ，这将启用消息的并行处理，同时在消息组中保持 FIFO。 例如，来自特定来源的所有消息都是 FIFO，但可以与来自其他来源的消息并行处理。 这是一项非常强大的功能，仅通过让 Amazon SNS 转发消息是无法实现的。