簡體   English   中英

如何從 Azure 數據工廠在 Databricks 上運行.Net spark 作業?

[英]How to run .Net spark jobs on Databricks from Azure Data Factory?

在 Azure 數據工廠中,您有一個 Databricks Acvitiy。 此活動支持運行 python、jar 和筆記本。 並且這些筆記本可能寫在 scala、python、java 和 ZE1E1D3D40573127E9ZEE048 中,但不是 c#/C#/AF127E9ZEE048。

是否有固有的或直接的支持,我可以編寫我的 .NET 火花代碼並在數據工廠的 Databricks 上運行它?

我可以在 Azure Databricks 中充分使用 .NET 火花嗎?

您指定要啟動 JAR 文件。 用於 Apache Spark 項目的 .NET 使用 JAR 文件啟動監聽器,然后 Z303CB0EF9EDB9082D61 代碼連接到 BBBE582。

The JAR is microsoft-spark-2.4.x-0.12.1.jar (depends on the version of spark and the .NET NuGet version). 要運行的 Class 是 org.apache.spark.deploy.dotnet.DotnetRunner,您需要將正確的參數傳遞給它,以便它啟動您的 .NET 應用程序。

埃德

暫無
暫無

聲明:本站的技術帖子網頁,遵循CC BY-SA 4.0協議,如果您需要轉載,請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.

 
粵ICP備18138465號  © 2020-2024 STACKOOM.COM