[英]How to copy azure blob files to azure data lake analytics
有没有一种方法可以在Azure上创建作业或Azure服务以将Azure Blob文件移动(剪切)到Azure数据湖存储?
我想说Azure数据工厂非常适合此。 它支持计划( https://docs.microsoft.com/zh-cn/azure/data-factory/data-factory-scheduling-and-execution ),并且支持将数据从Blob传输到Azure Data Lake。 请参见以下示例: https : //docs.microsoft.com/zh-cn/azure/data-factory/data-factory-azure-datalake-connector
从网站:
Data Factory是基于云的数据集成服务,可协调和自动化数据的移动和转换 。 您可以使用Data Factory服务创建数据集成解决方案,该服务可以从各种数据存储中提取数据,转换/处理数据并将结果数据发布到数据存储中。
Data Factory服务允许您创建用于移动和转换数据的数据管道,然后按照指定的时间表 (每小时,每天,每周等)运行这些管道。 它还提供了丰富的可视化效果,以显示数据管道之间的沿袭和依存关系,并从一个统一的视图监视所有数据管道,从而轻松查明问题并设置监视警报。
https://docs.microsoft.com/zh-cn/azure/data-factory/data-factory-introduction
Azure数据湖分析是一种计算服务,而不是数据存储。
Data Lake Analytics作业可以连接到以下数据:
因此,您既可以将数据保留在Blob存储中,也可以使用Azure数据工厂将其传输到Data Lake Store,以获得最佳的Analytics(分析)性能并享受其其他好处(请参阅https://docs.microsoft.com/zh-cn/azure / data-lake-store / data-lake-store-overview )。
声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.