Databrics 将 Pandas 数据框保存为 CSV Azure Data Lake

Question

我在 Azure Databrickk 中有 Pandas 数据框。 我需要将它保存为 Azure Data Lake gen2 上的一个 csv 文件。

我试过：

df.write.mode("overwrite").format("com.databricks.spark.csv").option("header","true").csv(dstPath)

和

df.write.format("csv").mode("overwrite").save(dstPath)

但现在我有 10 个 csv 文件，但我需要一个文件并为其命名。

提前致谢。

Answer 1

我找到了一个解决方案：

df.to_csv('/dbfs/mnt/....../df.csv', sep=',', header=True, index=False)