如何从行创建RDD
[英]How to create an RDD from a Row
问题描述
my question is very simple. 
我的问题很简单。 I want to convert the line below to an RDD. 我想将下面的行转换为RDD。
Row("val1","val2")
Do you have any idea? 你有什么主意吗？ thanks 谢谢
2 个解决方案
解决方案1
4 已采纳 2017-07-18 22:43:42
val abc = Row("val1","val2")
val rdd = sc.parallelize(Seq(abc))
val rowRdd = rdd.map(row => Row(row.toSeq))
rowRdd: org.apache.spark.rdd.RDD[org.apache.spark.sql.Row]
解决方案2
2 2018-01-22 08:56:48
sc.parallelize(List(Row("val1","val2")))
很好
声明:本站的技术帖子网页，遵循CC BY-SA 4.0协议，如果您需要转载，请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.
相关问题
SPARK：如何在Scala中从RDD [Row]创建聚合 - SPARK : How to create aggregate from RDD[Row] in Scala
当Row包含Map [Map]时如何从RDD [Row]创建Spark DataFrame - How to create Spark DataFrame from RDD[Row] when Row contains Map[Map]
当行包含复杂类型时，如何从RDD [Row]创建Spark DataFrame - How to create Spark DataFrame from RDD[Row] when Row contains complex types
如何使用其他RDD中的行值从RDD中引入数据 - how to bring data from an RDD using row values in other RDD
无法使用案例类从Row的RDD创建数据框 - Unable to create dataframe from RDD of Row using case class
如何从RDD创建Spark数据集 - How to create a Spark Dataset from an RDD
如何直接从Hive表创建RDD？ - How to create an RDD directly from Hive table?
如何通过从现有 RDD 中选择特定数据来创建 RDD，其中 output 应该是 RDD[String]？ - How to create an RDD by selecting specific data from an existing RDD where output should of RDD[String]?
如何将RDD [Row]转换为RDD [Vector] - How to convert RDD[Row] to RDD[Vector]
如何将RDD [Row]转换为RDD [String] - How to convert RDD[Row] to RDD[String]
相关标签