ETL / 从 Azure SQL 数据库到本地 SQL 服务器数据仓库的复制

Question

我正在尝试构建从 Azure SQL 数据库到本地 SQL 服务器数据仓库的日常 ETL 流程。

我在本地 SQL 服务器之间有 ETL 经验，但是对于 Azure，我不确定最佳实践。 我做了一些研究，得到了关于 ETL 和 ADP 的选项。

这里有没有人有类似的经历，可以给我一些启发吗？ 非常感谢任何评论、示例或教程。

Answer 1

有很多方法可以帮助您构建从 Azure SQL 数据库到本地 SQL 服务器数据仓库的日常 ETL 流程。

我建议您考虑Azure 数据工厂或 Azure SQL 数据库数据同步。

数据工厂可以帮助您构建管道在 Azure SQL 数据库和本地 SQL 服务器之间复制数据。 您可以创建一个时间触发器来每天触发副本。 参考这些文件：

1. 使用 Azure 数据工厂复制和转换 Azure SQL 数据库中的数据
2. 使用 Azure 数据工厂将数据复制到 SQL 服务器和从中复制数据

Data Sync is a feature of Azure SQL database, you can sync the data between SQL database and on-premise SQL Server automatically. 我认为这是可以以某种方式满足您的要求的最简单和最便宜的方式。 请注意要求和限制。

And like @Nick said, Azure SQL database doesn't support windows authentication, please use SQL authentication or AD.

HTH。