How to decide between Azure Data Lake vs Azure SQL vs Azure Data Lake Analytics vs Azure SQL VM?

Question

我是 Azure 的新手，因此試圖了解何時以及如何使用哪些服務。

目前，我有一個 excel 文件，其中有幾個選項卡需要一些轉換才能創建一個 excel 文件選項卡（在源文件本身內 - 比如說選項卡“x”）。 創建的最終選項卡“x”可用於創建最終的 excel 文件，該文件共享給各個團隊。

目前，一切都是手動完成的。

這需要改變，共享給團隊的 excel 文件必須自動化。 該文件的來源是 excel 文件，該文件具有各種選項卡（不包括選項卡“ x ”），報告工具將是 SSRS，excel 數據存儲在雲中。

記住這種情況，將 excel 數據存儲到雲中的最佳方式是什么？ excel 數據將按月存儲在雲端。 I am confused as to whether to store data in Azure-SQL, Azure Data Lake Gen 2 or Azure Data Lake Analytics or Azure SQL VM?

每個月的數據可以從 Excel 文件中獲取，並使用 azure 數據工廠填充到 Azure 中。 但我不確定在雲中存儲數據的最佳方式是什么，因為需要一些 ETL 過程來生成類似於選項卡“ X ”格式的數據。

Answer 1

您的存儲要求非常低，因此我將使用 select 數據湖來存儲您的文檔。 另一種選擇是 Blob 存儲，但我總是更喜歡 Data Lake，因為它適用於 Azure Active Directory。

在您的方案中，將其放在 ADL 中，並使用 ADL 作為 Azure 數據工廠中的源。

編輯：

老實說，您的原始帖子有點令人困惑。 您有一個 RAW Excel 文檔，您對 RAW 文檔進行一些轉換，以生成 Excel 源文檔。 此源文檔包含開發團隊將用於構建 SSRS 報告的最終數據集。 您需要將此數據集提供給團隊，以便他們可以連接到它來構建報告嗎？ 我的建議是保持簡單，將 Excel 格式的最終源數據集放入 blob 或數據湖存儲中，然后讓開發人員從該位置提取它。 如果您要設計和維護數據管道（Blob > 數據工廠 > SQL 或 CSV、TSV - 那么您將引入不必要的復雜性。

Answer 2

我想你可以考慮使用 Azure SQL 數據庫。

Azure SQL 數據庫或 SQL 服務器支持您從 excel（或 csv）文件導入數據。 有關詳細信息和限制，請參閱： 將數據從 Excel 導入到 SQL 服務器或 Azure Z9778840A0101B30C 數據庫

If your data have stored in Azure SQL database, you also can using EXCEL to get the data from Azure SQL database:

將 Excel 連接到 Azure SQL 數據庫中的單個數據庫並導入數據並根據數據庫中的值創建表格和圖表。 在本教程中，您將設置 Excel 和數據庫表之間的連接，保存存儲數據的文件和 Excel 的連接信息，然后從數據庫值創建 pivot 圖表。

參考： 從Excel導入數據到SQL服務器或Azure Z9778840A0107410CB30CA5BZB7數據庫。

I think you don't need to store these excel files in Azure Data Lake .Azure Data Lake Storage Gen2 is a set of capabilities dedicated to big data analytics, built on Azure Blob storage. 它仍然是一個存儲。

您使用的 Azure 資源越多，您需要支付的成本就越多。

如果您的 excel 文件存儲在本地計算機中，您可以使用 Azure 數據工廠訪問這些本地文件或使用自主機集成運行時。

請參考： 使用 Azure 數據工廠將數據復制到文件系統或從文件系統復制數據。

希望這可以幫助。