[英]How can I know programmatically if my spark program is running in local or cluster mode?
我想在運行時知道程序是在本地模式（只有一個節點）還是集群（例如 yarn-client 或 yarn-cluster）下運行？
只需使用master屬性：
spark.sparkContext.master: String
你可以直接打電話
spark.sparkContext.isLocal
如何將配置文件添加到在 YARN-CLUSTER 模式下運行的 Spark 作業？
[英]How can I add configuration files to a Spark job running in YARN-CLUSTER mode?
Scala / Spark：為什么在本地和群集中使用廣播運行spark程序時為什么會得到不同的結果？
[英]Scala/Spark: Why I get different result when I run spark program in local and cluster using broadcast?
為什么這個 Spark 代碼在本地模式下工作，而不在集群模式下工作？
[英]Why this Spark code works in local mode but not in cluster mode?
如何以編程方式知道應用程序是使用YARN在客戶端部署模式還是在集群部署模式下運行？
[英]How to know programmatically whether application runs in client or cluster deploy mode using YARN?
聲明:本站的技術帖子網頁，遵循CC BY-SA 4.0協議，如果您需要轉載，請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.