[英]How to choose the queue for Spark job using spark-submit?
有没有办法提供参数或设置来选择我想要运行spark_submit作业的队列？
通过使用--queue所以火花提交工作的一个例子是： -
spark-submit --master yarn --conf spark.executor.memory = 48G --conf spark.driver.memory = 6G --packages [packages by，] --queue [queue_name] --class [class_name] [jar_file ] [论点]
如何使用 spark-submit 在 Kubernetes (minikube) 上提交 PySpark 作业
[英]How to submit PySpark job on Kubernetes (minikube) using spark-submit
如何在不使用spark-submit的情况下将java程序中的spark作业提交到独立的spark集群？
[英]How to submit spark job from within java program to standalone spark cluster without using spark-submit?
如何使用 Spark-submit 命令获取提交到 Spark 集群的作业的应用程序 ID/作业 ID？
[英]How to get application Id/Job Id of job submitted to Spark cluster using Spark-submit command ?
在 spark-submit 工作中应该选择多少执行器和核心？
[英]How much should one choose the number of executors and cores on a spark-submit job?
如何在 kafka 生产者启动后使用 spark-submit 启动 spark-job.py
[英]how to launch spark-job.py using spark-submit after kafka producer started
如何在不使用“火花提交”的情况下触发火花作业？ 实时而不是批量
[英]How to trigger a spark job without using “spark-submit”? real-time instead of batch
声明:本站的技术帖子网页，遵循CC BY-SA 4.0协议，如果您需要转载，请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.
