Spark Scala中的字符串到鍵值轉換
[英]string to key-value conversion in spark scala
問題描述
我喜歡將字符串值轉換為鍵值對
來自以下格式： val1-12,val2-32,val3-43
到(val1,12),(val2,32),(val3,43)
1 個解決方案
解決方案1
0 已采納 2017-06-16 11:15:53
您可以像這樣結合flatMap和map
val string = Seq("val1-12,val2-32,val3-43")
val rdd = sc.parallelize(string).flatMap(line => line.split(",")).map(row => row.split("-")).map(kv => (kv(0), kv(1)))
使用 Scala 和 Spark 讀取文本文件中的鍵值對，鍵作為列名和值作為行
[英]Reading Key-Value pairs in a text file, key as column names and values as rows using Scala and Spark
如何使用Spark的地圖轉換在Scala中返回多個鍵值對？
[英]How do I return multiple key-value pairs in Scala using Spark's map transformation?
聲明:本站的技術帖子網頁，遵循CC BY-SA 4.0協議，如果您需要轉載，請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.
相關問題
在Spark Scala中將JSON字符串轉換為鍵值對數組
spark scala 數據幀中鍵值對的增量值計數
Spark-減少Scala中的鍵/值對列表
如何在 Spark 中使用 Scala 生成鍵值格式
Spark scala：可迭代到單個鍵值對
在Spark Scala中使用map（）對鍵值對重新排序
Spark dataframe 中的字符串到鍵值對（無 Pyspark）
使用 Scala 和 Spark 讀取文本文件中的鍵值對，鍵作為列名和值作為行
如何使用Spark的地圖轉換在Scala中返回多個鍵值對？
如何使用Spark Scala解析具有鍵值對的XML節點
相關標簽