[英]To get application id in particular file after spark-submit in cluster deploy mode
當我以集群模式部署應用程序時，我想在本地的文本文件中獲取應用程序 ID。
為此，我編輯了 log4j.properties 文件並為客戶端配置了它，但我沒有工作。
我也關注了這個博客： https ://largecats.github.io/blog/2020/09/21/spark-cluster-mode-collect-log/ 但沒有得到滿意的結果。
我也在集群部署模式下按照這個 spark-submit 獲取應用程序 ID 到控制台，但它在控制台上顯示應用程序 ID。
所以，請任何人幫助我，我被困在那里一周但沒有得到適當的解決方案。
您應該在提交期間將tag設置為您的 Spark 應用程序，然后根據標簽值ask Yarn 。
--conf spark.yarn.tags=tag-name
集群部署模式下的spark-submit將應用程序ID提供給控制台
[英]spark-submit in cluster deploy mode get application id to console
集群部署模式下的 Spark-submit 如何管理應用程序 Jars
[英]How does Spark-submit in cluster deploy mode manage the application Jars
如何使用 Spark-submit 命令獲取提交到 Spark 集群的作業的應用程序 ID/作業 ID？
[英]How to get application Id/Job Id of job submitted to Spark cluster using Spark-submit command ?
集群模式下spark-submit的log文件中不記錄print語句
[英]print statement is not recorded in log file in spark-submit in cluster mode
聲明:本站的技術帖子網頁，遵循CC BY-SA 4.0協議，如果您需要轉載，請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.
