[英]How can I know programmatically if my spark program is running in local or cluster mode?
我想在运行时知道程序是在本地模式（只有一个节点）还是集群（例如 yarn-client 或 yarn-cluster）下运行？
只需使用master属性：
spark.sparkContext.master: String
你可以直接打电话
spark.sparkContext.isLocal
如何将配置文件添加到在 YARN-CLUSTER 模式下运行的 Spark 作业？
[英]How can I add configuration files to a Spark job running in YARN-CLUSTER mode?
Scala / Spark：为什么在本地和群集中使用广播运行spark程序时为什么会得到不同的结果？
[英]Scala/Spark: Why I get different result when I run spark program in local and cluster using broadcast?
为什么这个 Spark 代码在本地模式下工作，而不在集群模式下工作？
[英]Why this Spark code works in local mode but not in cluster mode?
如何以编程方式知道应用程序是使用YARN在客户端部署模式还是在集群部署模式下运行？
[英]How to know programmatically whether application runs in client or cluster deploy mode using YARN?
声明:本站的技术帖子网页，遵循CC BY-SA 4.0协议，如果您需要转载，请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.