[英]Spark job with custom Docker image from private registry
我想構建一個可以與Spark的spark.mess.executor.docker.image配置選項一起使用的自定義Docker鏡像。 此圖像將包含私人信息，因此需要將其保存在私有注冊表中。 這可能嗎？ 我沒有看到任何記錄的方法來指定登錄憑據作為spark-submit命令的一部分。
我似乎應該指定docker憑證文件的URL作為spark.mesos.uris spark-submit選項的一部分。
Apache Spark：spark 執行器 pod 無法從注冊表/存儲庫中提取 docker 圖像
[英]Apache Spark : spark executor pod isn't able to pull docker image from a registry/repo
Unable to submit a spark job on spark cluster on docker
[英]Unable to submit a spark job on spark cluster on docker
從 Docker 映像運行 JavaFX Spark 應用程序時出錯
[英]Errors when running a JavaFX Spark Application from a Docker Image
從 docker 容器提交時，未將 Spark 作業安排給工作人員
[英]Spark job isn't being scheduled to workers when submit it from docker container
從同一個 minikube 節點的容器化 spark docker 鏡像訪問 Spark-Master
[英]Accessing Spark-Master from a containerized spark docker image from the same minikube Node
基於 jupyter/all-spark-notebook docker 映像的筆記本沒有拾取自定義 python 版本
[英]Notebook based on jupyter/all-spark-notebook docker image not picking up custom python version
如何將自定義描述添加到Spark Job以在Spark Web UI中顯示
[英]How to add custom description to Spark Job for displaying in Spark Web UI
聲明:本站的技術帖子網頁，遵循CC BY-SA 4.0協議，如果您需要轉載，請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.
