Azure Data Lake-.avro到SQL
[英]Azure Data Lake - .avro to SQL
問題描述
我正在使用事件中心上的捕獲功能將數據推入數據湖。 這將以.avro文件形式保存到湖泊中。
我想將此數據與SQL數據倉庫中已有的一些現有數據結合起來。 因此，對我來說，最明智的選擇似乎是將.avro文件推送到SQL中。 我怎樣才能做到這一點？
令人沮喪的是，來自API的數據最初是JSON格式，但從Azure上的網絡應用以.avro的形式返回。 如果我可以使文件為JSON，則只需在T-SQL中使用OPENJSON函數即可。
謝謝
1 個解決方案
解決方案1
1 2018-11-21 23:12:17
我對這個答案有點晚了，但是每當我使用U-SQL時，我發現檢查他們的github以獲取具有基線的示例很有用，因此我可以根據自己的需求進行改進。
要問的問題，您檢查了嗎？ https://github.com/Azure/usql/tree/master/Examples/AvroExamples它顯示了處理avro文件的基礎知識。
希望這有所幫助！ 馬丁
使用Python的U-SQL將Azure數據庫存儲中的JSON轉換為CSV
[英]U-SQL with Python to convert JSON to CSV in Azure Data Lake store
將 JSON 數據從 DocumentDB（或 CosmosDB）移動到 Azure Data Lake
[英]Move JSON Data from DocumentDB (or CosmosDB) to Azure Data Lake
將數據從 ADF 中的 REST API (JSON) 提取到 Azure Data Lake
[英]Extracting data from REST API (JSON) in ADF to Azure Data Lake
將 json 保存到 Azure Data Lake Storage Gen 2 中的文件
[英]Save json to a file in Azure Data Lake Storage Gen 2
使用Azure Data Factory將數據從Data Lake Store（JSON文件）移動到Azure搜索
[英]Move data from Data Lake Store (JSON file ) to Azure Search using Azure Data Factory
聲明:本站的技術帖子網頁，遵循CC BY-SA 4.0協議，如果您需要轉載，請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.
相關問題
嵌套JSON-Azure數據湖-U-SQL提取到CSV
Azure Data Lake中的U-SQL查詢錯誤
在 azure 數據湖存儲中導入 sql 查詢為 json 文檔
通過Azure Data Lake使用U-SQL將JSON嵌套到CSV
使用Python的U-SQL將Azure數據庫存儲中的JSON轉換為CSV
將 JSON 數據從 DocumentDB（或 CosmosDB）移動到 Azure Data Lake
將數據從 ADF 中的 REST API (JSON) 提取到 Azure Data Lake
解析從Azure數據湖下載的json文件
將 json 保存到 Azure Data Lake Storage Gen 2 中的文件
使用Azure Data Factory將數據從Data Lake Store（JSON文件）移動到Azure搜索
相關標簽