简体   繁体   English

如何删除Spark(SCALA)中的整个数据框?

[英]How to delete an entire data frame in Spark(SCALA)?

有一些函数可以删除Spark(SCALA)中的列和行,但找不到任何删除整个数据框的函数。有没有办法删除Spark(SCALA)中的数据框?

I'm not sure about which functions you are referring to delete columns from DFs. 我不确定你指的是从DF中删除列的哪些函数。 Spark Dataframes are immutable in nature as like RDDs . Spark数据帧本质上是不可变的,就像RDD一样 According to my understanding , its not possible. 据我了解,这是不可能的。 Only way to exaust an DF is garbage collection. 只有这样才能实现DF的垃圾收集。

Little more info on DataFrame 关于DataFrame的更多信息

声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.

 
粤ICP备18138465号  © 2020-2024 STACKOOM.COM