Azure Data Lake-.avro到SQL
[英]Azure Data Lake - .avro to SQL
问题描述
我正在使用事件中心上的捕获功能将数据推入数据湖。 这将以.avro文件形式保存到湖泊中。
我想将此数据与SQL数据仓库中已有的一些现有数据结合起来。 因此，对我来说，最明智的选择似乎是将.avro文件推送到SQL中。 我怎样才能做到这一点？
令人沮丧的是，来自API的数据最初是JSON格式，但从Azure上的网络应用以.avro的形式返回。 如果我可以使文件为JSON，则只需在T-SQL中使用OPENJSON函数即可。
谢谢
1 个解决方案
解决方案1
1 2018-11-21 23:12:17
我对这个答案有点晚了，但是每当我使用U-SQL时，我发现检查他们的github以获取具有基线的示例很有用，因此我可以根据自己的需求进行改进。
要问的问题，您检查了吗？ https://github.com/Azure/usql/tree/master/Examples/AvroExamples它显示了处理avro文件的基础知识。
希望这有所帮助！ 马丁
使用Python的U-SQL将Azure数据库存储中的JSON转换为CSV
[英]U-SQL with Python to convert JSON to CSV in Azure Data Lake store
将 JSON 数据从 DocumentDB（或 CosmosDB）移动到 Azure Data Lake
[英]Move JSON Data from DocumentDB (or CosmosDB) to Azure Data Lake
将数据从 ADF 中的 REST API (JSON) 提取到 Azure Data Lake
[英]Extracting data from REST API (JSON) in ADF to Azure Data Lake
将 json 保存到 Azure Data Lake Storage Gen 2 中的文件
[英]Save json to a file in Azure Data Lake Storage Gen 2
使用Azure Data Factory将数据从Data Lake Store（JSON文件）移动到Azure搜索
[英]Move data from Data Lake Store (JSON file ) to Azure Search using Azure Data Factory
声明:本站的技术帖子网页，遵循CC BY-SA 4.0协议，如果您需要转载，请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.
相关问题
嵌套JSON-Azure数据湖-U-SQL提取到CSV
Azure Data Lake中的U-SQL查询错误
在 azure 数据湖存储中导入 sql 查询为 json 文档
通过Azure Data Lake使用U-SQL将JSON嵌套到CSV
使用Python的U-SQL将Azure数据库存储中的JSON转换为CSV
将 JSON 数据从 DocumentDB（或 CosmosDB）移动到 Azure Data Lake
将数据从 ADF 中的 REST API (JSON) 提取到 Azure Data Lake
解析从Azure数据湖下载的json文件
将 json 保存到 Azure Data Lake Storage Gen 2 中的文件
使用Azure Data Factory将数据从Data Lake Store（JSON文件）移动到Azure搜索
相关标签