Datamechanics - spark docker 圖像 - 如何使用圖像內置連接器的示例

Question

我遇到了以下 docker 火花圖像。 該映像還附帶了一些連接器，可連接到一些流行的雲服務。 如何在 pyspark 應用程序中使用內置連接器（例如 Azure 存儲 gen2）的示例將有很大幫助。

鏈接到 dockerhub 圖片： https://hub.docker.com/r/datamechanics/spark

我查看了下面提供的示例，但它對理解如何使用默認圖像https 附帶的連接器沒有多大幫助://github.com/datamechanics/examples/blob/main/pyspark-example/main .py

Answer 1

在https://docs.datamechanics.co/docs/docker-images上有更多文檔，但確實對理解如何使用圖像沒有太大幫助。關鍵是沒有Dockerfile ，也沒有對報告的回應問題使它變得非常困難。

看起來https://g1thubhub.github.io/docker.html很有幫助，盡管使用的圖像版本較舊。