如何刪除Spark（SCALA）中的整個數據框？
[英]How to delete an entire data frame in Spark(SCALA)?
問題描述
有一些函數可以刪除Spark（SCALA）中的列和行，但找不到任何刪除整個數據框的函數。有沒有辦法刪除Spark（SCALA）中的數據框？
1 個解決方案
解決方案1
1 2016-10-15 20:20:57
我不確定你指的是從DF中刪除列的哪些函數。 Spark數據幀本質上是不可變的，就像RDD一樣 。 據我了解，這是不可能的。 只有這樣才能實現DF的垃圾收集。
如何在Spark SCALA中重命名AWS中的spark數據框輸出文件
[英]How to rename spark data frame output file in AWS in spark SCALA
如何在Scala / Spark數據框中的每一行使用帶有條件的withColumn
[英]How to use withColumn with condition for the each row in Scala / Spark data frame
如何在Scala Spark中訪問存儲在數據框中的映射值和鍵
[英]how to access map values and keys stored in a data frame in scala spark
如何過濾地圖<String, Int>在數據框中：Spark / Scala
[英]How to filter a map<String, Int> in a data frame : Spark / Scala
如何聚合Spark數據框以使用Scala獲取稀疏向量？
[英]How to aggregate a Spark data frame to get a sparse vector using Scala?
如何使用 Spark/Scala 將這樣的嵌套多行 json 文件讀入數據幀
[英]How to read such a nested multiline json file into a data frame with Spark/Scala
聲明:本站的技術帖子網頁，遵循CC BY-SA 4.0協議，如果您需要轉載，請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.
相關問題
如何扁平化Apache Spark中的數據框 斯卡拉
如何在Spark SCALA中重命名AWS中的spark數據框輸出文件
火花 Scala 數據幀 select
元組到火花scala中的數據框架
如何在Scala / Spark數據框中的每一行使用帶有條件的withColumn
如何在Scala Spark中訪問存儲在數據框中的映射值和鍵
如何過濾地圖<String, Int>在數據框中：Spark / Scala
如何從spark scala中的數據框中查找短語計數？
如何聚合Spark數據框以使用Scala獲取稀疏向量？
如何使用 Spark/Scala 將這樣的嵌套多行 json 文件讀入數據幀
相關標簽