使用Firehose將Kinesis Stream轉換為S3備份

Question

我正在使用包含客戶交易的AWS Kinesis Stream。 我想在開始處理之前將事務備份到S3中。 如何在不運行任何Lambda或其他計算組件的情況下，使用裸Kinesis Firehose從Kinesis Stream備份事務？

Answer 1

您可以顛倒Kinesis構建塊的順序：

1. 無需寫入Kinesis Stream，而是寫入指向S3的Kinesis Firehose。

2. 運行Kinesis Analytics（KA）應用程序以從Kinesis Firehose（KF）中讀取事件，並將其寫入Kinesis Stream（KS）。 您可以使用KA的功能來執行某些過濾，聚合和聯接，而這些過濾，聚合和聯接將在代碼（Lambda或KCL）中運行。