如何每天將Redshift S3卸載的數據復制到Azure？

Question

我想建立一種機制，每天將數據從redshift卸載到文件夾中的S3，並且每天將數據復制到Auzre，我想以這樣的方式構建它，以便每天進行卸載每天將刪除舊的S3文件，以便Azure將僅獲取Azure SQL數據庫中的最新文件。 可以做到這一點。 我在這方面找不到很多東西。

Answer 1

ADF不支持s3作為接收器。 因此，您無法使用內置復制活動將文件復制到s3。 但是，當源為Redshift時，ADF將提供一個卸載設置 ，這將幫助您首先將數據卸載到s3。

然后，您可以專注於將數據從Redshift復制到Azure SQL。 在這種情況下，您可以使用計划觸發器或滾動窗口觸發器來建立基於每日的管道。