Databrics 將 Pandas 數據框保存為 CSV Azure Data Lake

Question

我在 Azure Databrickk 中有 Pandas 數據框。 我需要將它保存為 Azure Data Lake gen2 上的一個 csv 文件。

我試過：

df.write.mode("overwrite").format("com.databricks.spark.csv").option("header","true").csv(dstPath)

和

df.write.format("csv").mode("overwrite").save(dstPath)

但現在我有 10 個 csv 文件，但我需要一個文件並為其命名。

提前致謝。

Answer 1

我找到了一個解決方案：

df.to_csv('/dbfs/mnt/....../df.csv', sep=',', header=True, index=False)