HD Insight 3.6：Data Factory V2-運行腳本操作以安裝按需群集的依賴項
[英]HD Insight 3.6: Data Factory V2- Running Script Actions to Install Dependencies for On-Demand Cluster
問題描述
我目前正在嘗試使用腳本操作來使用Data Factory V2部署按需群集（火花），以安裝Python腳本需要運行的依賴項。 但是，腳本動作的概念似乎在V2中丟失了。
到目前為止，如何在群集節點上安裝軟件包？ 還有其他選擇嗎？
1 個解決方案
解決方案1
0 2018-02-05 21:51:21
據我所知，HD Insight似乎仍支持腳本操作來安裝外部依賴項：
在Azure門戶的啟動板中，單擊Spark群集的磁貼（如果將其固定到啟動板）。 您也可以在“瀏覽所有”>“ HDInsight群集”下導航到您的群集。
在Spark群集刀片服務器中，單擊左窗格中的“腳本操作”。 運行將TensorFlow安裝在頭節點和輔助節點中的自定義操作。 可以從以下位置引用bash腳本： https : //hdiconfigactions.blob.core.windows.net/linuxtensorflow/tensorflowinstall.sh請訪問有關如何使用自定義腳本操作的文檔。
完整的文檔在這里
Azure數據工廠HDInsight點播群集“無法實例化SessionHiveMetaStoreClient”
[英]Azure data factory HDInsight on-demand cluster 'Unable to instantiate SessionHiveMetaStoreClient'
在按需 hdinsight 集群中的 hive 腳本中使用 JsonSerDe
[英]Using JsonSerDe in a hive script in an on-demand hdinsight cluster
在 Azure 數據工廠中為按需 HDInsight 操作指定目標 blob 容器
[英]Specify target blob container for on-demand HDInsight action in Azure Data Factory
適用於Azure Data Factory點播HDInsight群集中用於Pig的Python UDF
[英]Python UDF for Pig in Azure Data Factory On demand HDInsight cluster
AZURE HD INSIGHT（集群）將CSV文件導入存儲：創建表
[英]AZURE HD INSIGHT (Cluster) Import CSV file to storage: Creating a table
聲明:本站的技術帖子網頁，遵循CC BY-SA 4.0協議，如果您需要轉載，請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.
相關問題
按需獲取 HD Insight Cluster 集群名稱
如何將腳本操作添加到Azure HD Insight Cluster
Azure數據工廠HDInsight點播群集“無法實例化SessionHiveMetaStoreClient”
數據工廠創建hdinsight按需群集失敗
從Azure數據工廠管道中獲取按需數據
在按需 hdinsight 集群中的 hive 腳本中使用 JsonSerDe
在 Azure 數據工廠中為按需 HDInsight 操作指定目標 blob 容器
適用於Azure Data Factory點播HDInsight群集中用於Pig的Python UDF
AZURE HD INSIGHT（集群）將CSV文件導入存儲：創建表
R Server HD Insight群集主機密鑰驗證失敗
相關標簽