簡體   English   中英

Databricks Spark Conf

[英]Databricks Spark Conf

抱歉,這里有個愚蠢的問題,但是我想更改Spark連接器的配置,特別是Mongo Spark連接器(需要將連接器從命中Prod服務器更改為我們的輔助服務器)。 如何訪問SparkConf進行更改? 我正在使用Databricks和Python v2.1

我在看https://docs.mongodb.com/spark-connector/master/configuration/,但是我什至在哪里輸入都感到困惑? 本地? 在筆記本上? 進入命令行? 我已經嘗試過了,還沒有成功。 如果有人對故障進行了切實可行的逐步分解,那將是驚人的。

如果要使用Databricks儀表板提供配置:

  • 轉到您的Databricks儀表板。
  • 打開集群面板。

    在此處輸入圖片說明

  • 單擊創建群集。

    在此處輸入圖片說明

  • 打開“ Spark”選項卡並指定所需的選項:

    在此處輸入圖片說明

  • 您應該使用與配置文件相同的格式,包括前綴:

     spark.mongodb.input.uri mongodb://host:port/ 

參考:

暫無
暫無

聲明:本站的技術帖子網頁,遵循CC BY-SA 4.0協議,如果您需要轉載,請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.

 
粵ICP備18138465號  © 2020-2024 STACKOOM.COM