在Azure數據工廠復制活動之后獲取文件列表

Question

在azure數據工廠中進行復制活動之后，是否有一種方法可以給我提供在azure數據湖存儲中復制的文件列表？ 我必須從數據源復制數據，之后必須根據特定條件跳過文件。 條件還必須檢查文件路徑和名稱以及sql數據庫中的其他數據。 任何想法？

Answer 1

截至目前，尚無在復制活動后獲取文件列表的功能。 但是，您可以使用get Metadata活動或Lookup Activity並將其鏈接到Filter活動以根據您的條件獲取文件列表。

有一個解決方法，您可以在此處查看 。

“在這種情況下，解決方案實際上非常簡單。我剛剛在Azure數據工廠中創建了另一個管道，該管道是由Blob Created事件觸發的，並且文件夾和文件名作為參數傳遞給了我的筆記本。看起來工作得很好，而且最小所需的配置量或代碼量。事件可以進行基本過濾，其余的則取決於筆記本。

對於在此場景中遇到問題的其他任何人，請參見以下詳細信息：

https://docs.microsoft.com/zh-cn/azure/data-factory/how-to-create-event-trigger “