使用Firehose将Kinesis Stream转换为S3备份

Question

我正在使用包含客户交易的AWS Kinesis Stream。 我想在开始处理之前将事务备份到S3中。 如何在不运行任何Lambda或其他计算组件的情况下，使用裸Kinesis Firehose从Kinesis Stream备份事务？

Answer 1

您可以颠倒Kinesis构建块的顺序：

1. 无需写入Kinesis Stream，而是写入指向S3的Kinesis Firehose。

2. 运行Kinesis Analytics（KA）应用程序以从Kinesis Firehose（KF）中读取事件，并将其写入Kinesis Stream（KS）。 您可以使用KA的功能来执行某些过滤，聚合和联接，而这些过滤，聚合和联接将在代码（Lambda或KCL）中运行。